亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 編程 > ASP > 正文

寫了段批量抓取某個列表頁的代碼

2024-05-04 11:07:56
字體:
來源:轉載
供稿:網友
有些人當抓取程序是個寶,到目前還TND有人在賣錢,強烈BS一下這些家伙 真是的!可能偶下邊這段東西比較爛哈 
下邊這個沒有寫入庫功能,已經到這一步了,入庫功能是很簡單的事了,需要的請自己去完成吧,其它功能各位自行完善吧!把代碼拷貝過去直接運行即可看到效果

Dim Url,List_PageCode,Array_ArticleID,i,ArticleID
Dim Content_PageCode,Content_TempCode
Dim Content_CategoryID,Content_CategoryName,BorderID,ClassID,BorderName,ClassName
Dim ArticleTitle,ArticleAuthor,ArticleFrom,ArticleContent

Url = "http://www.webasp.net/article/class/1.htm"
List_PageCode = getHTTPPage(Url)
List_PageCode = RegExpText(List_PageCode,"打印</th></tr>","</table><table border=0 cellpadding=5",0)
List_PageCode = RegExpText(List_PageCode,"<td align=left><a href='../","'><img border=0 src='../images/authortype0.gif'",1) '取得當前列表頁的文章鏈接,以,分隔
Array_ArticleID = Split(List_PageCode,",") '創建數組,存儲文章ID

For i=0 To Ubound(Array_ArticleID)-1
ArticleID = Array_ArticleID(i) '文章ID
Content_PageCode = getHTTPPage("http://www.webasp.net/article/"&ArticleID) '取得文章頁的內容

'=========取文章分類及相關ID參數 開始=======================
Content_TempCode = RegExpText(Content_PageCode,"<a href=""/article/"">技術教程</a> >> ",">> 內容</td>",0)
Content_CategoryID = RegExpText(Content_PageCode,"<a href='../class","/'>",1)
BorderID = Split(Content_CategoryID,",")(0) '大類ID
ClassID = Split(Content_CategoryID,",")(1) '子類ID
'==========檢查大類是否存在 開始===============
'如果不存在則入庫

'==========檢查大類是否存在 結束===============
'Response.Write(BorderID & "," & ClassID & "<br />")
Content_CategoryName = RegExpText(Content_PageCode,"/'>","</a>",1)
BorderName = Split(Content_CategoryName,",")(0) '大類名稱
ClassName = Split(Content_CategoryName,",")(1) '子類名稱
'==========檢查子類是否存在 開始===============
'如果不存在則入庫

'==========檢查子類是否存在 結束===============
'=========取文章分類及相關ID參數 結束=======================

'=========取文章標題及內容 開始=============================

ArticleTitle = RegExpText(Content_PageCode,"<tr><td align=center bgcolor=#DEE2F5><strong>","</strong></td></tr>",0)
ArticleAuthor = RegExpText(Content_PageCode,"<tr><td><span class=blue>作者:</span>","</td></tr>",0)
ArticleFrom = RegExpText(Content_PageCode,"<tr><td><span class=blue>來源:</span>","</td></tr>",0)
ArticleContent = RegExpText(Content_PageCode,"<tr><td class=content style=""WORD-WRAP: break-word"" id=zoom>","</td></tr>"&VBCrlf&" </table>"&VBCrlf&" </td></tr></table>",0)
'=========取文章標題及內容 結束=============================
Response.Write(ArticleTitle& "<br /><br />")
Response.Flush()
Next


附幾個函數:
Function getHTTPPage(url) 
IF(IsObjInstalled("Microsoft.XMLHTTP") = False)THEN
Response.Write "<br><br>服務器不支持Microsoft.XMLHTTP組件" 
Err.Clear
Response.End
END IF
On Error Resume Next
Dim http 
SET http=Server.CreateObject("Msxml2.XMLHTTP") 
Http.open "GET",url,False 
Http.send() 
IF(Http.readystate<>4)THEN
Exit Function 
END IF 
getHTTPPage=BytesToBSTR(Http.responseBody,"GB2312")
SET http=NOTHING
IF(Err.number<>0)THEN
Response.Write "<br><br>獲取文件內容出錯" 
'Response.End
Err.Clear
END IF 
End Function


Function BytesToBstr(CodeBody,CodeSet)
Dim objStream
SET objStream = Server.CreateObject("adodb.stream")
objStream.Type = 1
objStream.Mode =3
objStream.Open
objStream.Write CodeBody
objStream.Position = 0
objStream.Type = 2
objStream.Charset = CodeSet
BytesToBstr = objStream.ReadText 
objStream.Close
SET objStream = NOTHING
End Function

'================================================
'作 用:檢查組件是否已經安裝
'返回值:True ----已經安裝
' False ----沒有安裝
'================================================
Function IsObjInstalled(objName)
On Error Resume Next
IsObjInstalled = False
Err = 0
Dim testObj
SET testObj = Server.CreateObject(objName)
IF(0 = Err)THEN IsObjInstalled = True
SET testObj = NOTHING
Err = 0
End Function

Function RegExpText(strng,strStart,strEnd,n)
Dim regEx,Match,Matches,RetStr
SET regEx = New RegExp
regEx.Pattern = strStart&"([/s/S]*?)"&strEnd
regEx.IgnoreCase = True
regEx.Global = True
SET Matches = regEx.Execute(strng)
For Each Match in Matches
IF(n=1)THEN
RetStr = RetStr & regEx.Replace(Match.Value,"$1") & "," 
ELSE
RetStr = RetStr & regEx.Replace(Match.Value,"$1")
END IF 
Next
RegExpText = RetStr
SET regEx=NOTHING
End Function
發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb
亚洲va欧美va国产综合剧情| 日韩高清电影免费观看完整版| 欧美日韩视频免费播放| 97视频在线免费观看| 91在线网站视频| 丝袜一区二区三区| 欧美一级大片在线免费观看| 国产偷亚洲偷欧美偷精品| 国产色婷婷国产综合在线理论片a| 日韩69视频在线观看| 97在线观看视频| 日韩电影在线观看永久视频免费网站| 国产午夜精品免费一区二区三区| 日本久久中文字幕| 国产91精品网站| 欧美国产日韩在线| 91久久久久久国产精品| 精品久久久久国产| 欧美视频精品一区| 中文字幕亚洲综合久久筱田步美| 国产欧美中文字幕| 欧美性高潮在线| 欧美性xxxx极品高清hd直播| 欧美国产日韩xxxxx| 在线观看精品国产视频| 欧美一级视频免费在线观看| 日韩精品免费一线在线观看| 亚洲国产精品一区二区三区| 国产亚洲精品va在线观看| 国外视频精品毛片| 色综合亚洲精品激情狠狠| 亚洲男人av电影| 亚洲va欧美va在线观看| www.午夜精品| 日韩在线激情视频| 亚洲精品久久久久中文字幕欢迎你| 毛片精品免费在线观看| 日韩电影在线观看中文字幕| 国产精品久久久久久婷婷天堂| 亚洲无限av看| 亚洲欧美日韩久久久久久| 欧美国产第二页| 中文字幕综合一区| 国产精品视频免费观看www| 欧美视频精品一区| 国产精品亚洲片夜色在线| 91成人免费观看网站| 97精品伊人久久久大香线蕉| 精品自拍视频在线观看| 国产成人91久久精品| 亚洲欧美中文字幕在线一区| 亚洲国产又黄又爽女人高潮的| 中文字幕国产精品久久| 亚洲网址你懂得| 性欧美激情精品| 欧美亚洲另类制服自拍| 主播福利视频一区| 97视频在线观看免费高清完整版在线观看| 国产原创欧美精品| 国产精品福利小视频| 亚洲精品suv精品一区二区| 97精品一区二区视频在线观看| 精品国产成人av| 日韩视频第一页| 国产专区精品视频| 国产精品网址在线| 久久精品国产69国产精品亚洲| 91精品在线一区| 欧美成人亚洲成人日韩成人| 色99之美女主播在线视频| 亚洲高清久久久久久| 亚洲精品国精品久久99热| 亚洲电影免费观看高清| 亚洲国产精品资源| 欧美国产一区二区三区| 1769国产精品| 久久久久这里只有精品| 黄网站色欧美视频| 久久久精品一区二区三区| 欧美激情第一页xxx| 国产一区视频在线播放| 日本一本a高清免费不卡| 久久精品国产久精国产思思| 日本成人黄色片| 亚洲高清免费观看高清完整版| 狠狠躁夜夜躁人人爽超碰91| 日韩精品在线观| 国产精品久久久av久久久| 91亚洲精品一区| 亚洲综合第一页| 中文字幕视频在线免费欧美日韩综合在线看| 日韩成人xxxx| 亚洲一区二区久久久久久| 亚洲图片在线综合| 国产精品啪视频| 精品久久久久久久久久久久| 亚洲自拍欧美色图| 97热在线精品视频在线观看| 欧美日韩国产精品一区| 国产精彩精品视频| 欧美日韩国产激情| 成人免费看吃奶视频网站| 欧美激情久久久久| 国产精品欧美日韩久久| 26uuu亚洲国产精品| 欧美一区二三区| 欧美日韩亚洲视频| 亚洲欧美中文日韩v在线观看| 久99九色视频在线观看| 久久天堂av综合合色| 性日韩欧美在线视频| 国产极品jizzhd欧美| 欧美乱大交做爰xxxⅹ性3| 欧美国产日本在线| 最新亚洲国产精品| 精品国产999| 亚洲xxxxx电影| 国产一区二区三区高清在线观看| 精品亚洲精品福利线在观看| 久久久97精品| 国产成人精品电影久久久| 色悠悠久久88| 中文字幕亚洲色图| 97热在线精品视频在线观看| 日韩a**中文字幕| 亚洲国产精品美女| 欧美国产第二页| 国产精品成人一区二区三区吃奶| 97视频在线观看亚洲| 最新亚洲国产精品| 日韩av手机在线看| 国产视频999| 亚洲性线免费观看视频成熟| 高清日韩电视剧大全免费播放在线观看| 亚洲新声在线观看| 日韩av免费在线播放| 黑人巨大精品欧美一区二区一视频| 国产精品一区久久久| 国产成人精品日本亚洲专区61| 久久99热精品这里久久精品| 欧美色播在线播放| 亚洲成色777777女色窝| 成人做爰www免费看视频网站| 国产v综合ⅴ日韩v欧美大片| 亚洲在线第一页| 国产精品久久久久久久久久| 精品久久久久久中文字幕| 欧美黑人狂野猛交老妇| 国产综合香蕉五月婷在线| 亚洲日韩中文字幕在线播放| 欧美在线免费观看| 日韩精品在线免费播放| 国产精品久久婷婷六月丁香| 亚洲福利在线播放| 在线成人激情黄色| 国产精品99导航| 亚洲bt天天射| 亚洲男人天堂2023| 97国产精品久久| 国产成人精品一区| 欧美成人h版在线观看| 日韩毛片在线看| 亚洲午夜激情免费视频| 精品视频在线播放|