亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 編程 > ASP > 正文

批量抓取某個列表頁的教程分享

2024-05-04 11:04:59
字體:
來源:轉載
供稿:網友

本篇文章介紹了批量抓取某個列表頁的教程分享,下面我們就來看看詳細的教程,需要的朋友可以參考下。

有些人當抓取程序是個寶,到目前還TND有人在賣錢,強烈BS一下這些家伙 真是的!可能偶下邊這段東西比較爛哈
下邊這個沒有寫入庫功能,已經到這一步了,入庫功能是很簡單的事了,需要的請自己去完成吧,其它功能各位自行完善吧!把代碼拷貝過去直接運行即可看到效果

Dim?Url,List_PageCode,Array_ArticleID,i,ArticleID
Dim?Content_PageCode,Content_TempCode
Dim?Content_CategoryID,Content_CategoryName,BorderID,ClassID,BorderName,ClassName
Dim?ArticleTitle,ArticleAuthor,ArticleFrom,ArticleContent

Url?=?"http://www.webasp.net/article/class/1.htm"
List_PageCode?=?getHTTPPage(Url)
List_PageCode?=?RegExpText(List_PageCode,"打印","

List_PageCode?=?RegExpText(List_PageCode," '取得當前列表頁的文章鏈接,以,分隔
Array_ArticleID?=?Split(List_PageCode,",")????'創建數組,存儲文章ID

For?i=0?To?Ubound(Array_ArticleID)-1
????ArticleID?=?Array_ArticleID(i)????'文章ID
????Content_PageCode?=?getHTTPPage("http://www.webasp.net/article/"&ArticleID)????'取得文章頁的內容

????'=========取文章分類及相關ID參數?開始=======================
????Content_TempCode?=?RegExpText(Content_PageCode,"
技術教程?>>?",">>?內容",0)
????Content_CategoryID?=?RegExpText(Content_PageCode,"",1)
????BorderID?=?Split(Content_CategoryID,",")(0)????'大類ID
????ClassID?=?Split(Content_CategoryID,",")(1)????'子類ID
????????'==========檢查大類是否存在?開始===============
????????'如果不存在則入庫

????????'==========檢查大類是否存在?結束===============
????'Response.Write(BorderID?&?","?&?ClassID?&?"
")
????Content_CategoryName?=?RegExpText(Content_PageCode,"/'>","
",1)
????BorderName?=?Split(Content_CategoryName,",")(0)????'大類名稱
????ClassName?=?Split(Content_CategoryName,",")(1)????'子類名稱
????????'==========檢查子類是否存在?開始===============
????????'如果不存在則入庫

????????'==========檢查子類是否存在?結束===============
????'=========取文章分類及相關ID參數?結束=======================

????'=========取文章標題及內容?開始=============================

????ArticleTitle?=?RegExpText(Content_PageCode,"","",0)
????ArticleAuthor?=?RegExpText(Content_PageCode," 作者:","",0)
????ArticleFrom?=?RegExpText(Content_PageCode," 來源:","",0)
????ArticleContent?=?RegExpText(Content_PageCode,"",""&VBCrlf&"????????"&VBCrlf&"????",0)
????'=========取文章標題及內容?結束=============================
????Response.Write(ArticleTitle&?"

")
????Response.Flush()
Next


附幾個函數:

Function?getHTTPPage(url)?
????IF(IsObjInstalled("Microsoft.XMLHTTP")?=?False)THEN
????????Response.Write?"

服務器不支持Microsoft.XMLHTTP組件"?
????????Err.Clear
????????Response.End
????END?IF
????On?Error?Resume?Next
????Dim?http?
????SET?http=Server.CreateObject("Msxml2.XMLHTTP")?
????Http.open?"GET",url,False?
????Http.send()?
????IF(Http.readystate4)THEN
????????Exit?Function?
????END?IF?
????getHTTPPage=BytesToBSTR(Http.responseBody,"GB2312")
????SET?http=NOTHING
????IF(Err.number0)THEN
????????Response.Write?"

獲取文件內容出錯"?
????????'Response.End
????????Err.Clear
????END?IF??
End?Function

????????
Function?BytesToBstr(CodeBody,CodeSet)
????Dim?objStream
????SET?objStream?=?Server.CreateObject("adodb.stream")
????objStream.Type?=?1
????objStream.Mode?=3
????objStream.Open
????objStream.Write?CodeBody
????objStream.Position?=?0
????objStream.Type?=?2
????objStream.Charset?=?CodeSet
????BytesToBstr?=?objStream.ReadText?
????objStream.Close
????SET?objStream?=?NOTHING
End?Function

'================================================
'作??用:檢查組件是否已經安裝
'返回值:True??----已經安裝
'????????False?----沒有安裝
'================================================
Function?IsObjInstalled(objName)
????On?Error?Resume?Next
????IsObjInstalled?=?False
????Err?=?0
????Dim?testObj
????SET?testObj?=?Server.CreateObject(objName)
????IF(0?=?Err)THEN?IsObjInstalled?=?True
????SET?testObj?=?NOTHING
????Err?=?0
End?Function

Function?RegExpText(strng,strStart,strEnd,n)
????Dim?regEx,Match,Matches,RetStr
????SET?regEx?=?New?RegExp
????regEx.Pattern?=?strStart&"([/s/S]*?)"&strEnd
????regEx.IgnoreCase?=?True
????regEx.Global?=?True
????SET?Matches?=?regEx.Execute(strng)
????For?Each?Match?in?Matches
????????IF(n=1)THEN
????????????RetStr?=?RetStr?&?regEx.Replace(Match.Value,"$1")?&?","?
????????ELSE
????????????RetStr?=?RetStr?&?regEx.Replace(Match.Value,"$1")
????????END?IF?
????Next
????RegExpText?=?RetStr
????SET?regEx=NOTHING
End?Function
以上就是批量抓取某個列表頁的教程分享的全部內容介紹了,希望小編整理的相關知識和資料都對你們有所幫助,更多內容請繼續關注錯新技術頻道網站!
發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb
欧美激情精品久久久久久久变态| 久久亚洲私人国产精品va| 精品少妇一区二区30p| 日韩在线视频网站| 日韩电影大片中文字幕| 国产91对白在线播放| 欧洲美女7788成人免费视频| 中文字幕久精品免费视频| 91在线中文字幕| 日韩精品日韩在线观看| 国产精品永久在线| 日韩的一区二区| 国产精品久久久久久av下载红粉| 欧美www视频在线观看| 欧美色道久久88综合亚洲精品| 26uuu另类亚洲欧美日本一| 欧美午夜影院在线视频| 欧美丝袜一区二区三区| 亚洲激情国产精品| 亚洲精品日韩在线| 久久天天躁狠狠躁夜夜躁2014| 精品偷拍各种wc美女嘘嘘| 4438全国亚洲精品在线观看视频| 亚洲人成网站777色婷婷| 欧美精品在线视频观看| 欧美精品18videos性欧美| 在线播放国产一区二区三区| 亚洲欧洲免费视频| 岛国av一区二区在线在线观看| 久久久电影免费观看完整版| 91精品国产91久久久久| 亚洲 日韩 国产第一| 欧美激情国产高清| 一区二区三区视频免费在线观看| 成人激情av在线| 国产999视频| 日韩美女福利视频| 久久免费视频网| 欧美在线免费看| 91麻豆国产语对白在线观看| 日韩网站在线观看| 懂色aⅴ精品一区二区三区蜜月| 国产一区二区三区日韩欧美| 亚洲韩国青草视频| 日韩第一页在线| 91视频国产高清| 青草青草久热精品视频在线网站| 91精品综合久久久久久五月天| 国产一区二区日韩精品欧美精品| 亚洲精品午夜精品| 国产激情视频一区| 日韩精品免费一线在线观看| 国产69精品久久久久久| 国产精品视频一| 亚洲大尺度美女在线| 欧美日韩加勒比精品一区| 97香蕉超级碰碰久久免费软件| 欧美日韩午夜视频在线观看| 欧美精品国产精品日韩精品| 日韩美女在线看| 北条麻妃一区二区三区中文字幕| 成人黄色免费网站在线观看| 国产精品扒开腿做爽爽爽男男| 国产精品高清网站| 日韩成人激情在线| 日韩欧美在线网址| 欧美精品在线观看91| 97国产精品视频人人做人人爱| 久久久久在线观看| 91免费福利视频| 国产视频999| 国产69精品久久久久久| 九九久久久久久久久激情| 中文字幕精品—区二区| 成人激情春色网| 国产成人精品最新| 日韩精品免费电影| 久久国产精品久久久久| 在线激情影院一区| 欧美黑人xxxx| www.xxxx精品| 成人妇女淫片aaaa视频| 日韩高清免费在线| 亚洲欧洲在线看| 亚洲精品91美女久久久久久久| 久久久精品国产一区二区| 国产精品美女免费看| 亚洲人a成www在线影院| 久久国产精品网站| 亚洲精品乱码久久久久久按摩观| 热久久免费国产视频| 色婷婷综合成人| 最近2019年手机中文字幕| 欧美日韩国产第一页| 欧美国产一区二区三区| 岛国av午夜精品| 高潮白浆女日韩av免费看| 亚洲伊人久久大香线蕉av| 精品国产一区二区三区久久久| 欧美噜噜久久久xxx| 亚洲影视九九影院在线观看| xvideos亚洲| 亚洲欧美日韩视频一区| 国产免费一区二区三区香蕉精| 欧美大胆a视频| 69av在线播放| 久久韩剧网电视剧| 高潮白浆女日韩av免费看| 国产精品精品久久久久久| 清纯唯美日韩制服另类| 亚洲国产成人精品一区二区| 黑人巨大精品欧美一区免费视频| 亚洲a中文字幕| 日韩欧美国产中文字幕| 亚洲人成77777在线观看网| 国产精品av在线播放| 欧美精品xxx| 久久伊人精品视频| 狠狠躁夜夜躁人人躁婷婷91| 久久久久久久久久久av| 国产精品久久久亚洲| 欧美成人精品影院| 成人精品视频在线| 日本高清不卡的在线| 国产成人一区二| 亚洲视频国产视频| 4438全国成人免费| 91精品国产91久久久久久吃药| 欧美日韩成人在线视频| 全色精品综合影院| 中文字幕亚洲情99在线| 亚洲视频免费一区| 欧美性xxxxx极品娇小| 久久久国产影院| 久久久人成影片一区二区三区观看| 欧美丰满片xxx777| 国产九九精品视频| 欧美精品在线看| 久久久国产一区二区三区| 在线观看欧美www| 亚洲第一男人av| 国产一区二区三区直播精品电影| 一区二区三区无码高清视频| 97精品国产97久久久久久春色| 欧美日韩国产91| 丰满岳妇乱一区二区三区| 久久天天躁夜夜躁狠狠躁2022| 97avcom| 亚洲aa在线观看| 欧美大秀在线观看| 色婷婷亚洲mv天堂mv在影片| 国产日韩欧美视频在线| 日韩视频亚洲视频| 法国裸体一区二区| 欧美日韩免费网站| 中文字幕亚洲自拍| 欧美性猛交xxxx久久久| 大荫蒂欧美视频另类xxxx| 欧美亚洲另类制服自拍| 国产成人激情小视频| 色噜噜亚洲精品中文字幕| 国外成人性视频| 成人欧美一区二区三区在线| 亚洲男人的天堂在线播放|