亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 編程 > PHP > 正文

php+phpquery簡易爬蟲抓取京東商品分類

2020-03-22 20:19:59
字體:
來源:轉載
供稿:網友
  •   這是一個簡單的php加phpquery實現抓取京東商品分類頁內容的簡易爬蟲。phpquery可以非常簡單地幫助你抽取想要的html內容,phpquery和jquery非常類似,可以說是幾乎一樣;如果你有jquery的基礎的話你可以迅速地上手。

      1、下載phpquery并置于web根目錄下的phpQuery文件夾

        phpquery下載:https://code.google.com/p/phpquery/downloads/list

        phpquery教程可在這里查看:https://code.google.com/p/phpquery/

      2、抓取程序

    <?php/* * Created on 2015-1-29 * * To change the template for this generated file go to * Window - Preferences - PHPeclipse - PHP - Code Templates */ header('Content-type:text/html; charset=utf-8');function getPage( $url ){  $cnt = file_get_contents($url);  return mb_convert_encoding($cnt ,'UTF-8','GBK');}include 'phpQuery/phpQuery.php'; $url = 'http://www.jd.com/allSort.aspx';$page = getPage($url);//phpQuery::newDocumentHTML($page);phpQuery::newDocumentFile($url);$firstCate = pq('#allsort .m');$id = 0;foreach($firstCate as $first){    $id ++;    $topcate = pq($first)->find('.mt a');    //echo '**************************' . $topcate->text() . '**************************************</br>';    echo $id . '#';    foreach($topcate as $top){        echo pq($top)->text() . '#' . '< a href='' .pq($top)->attr('href') . '' target='_blank'>' . pq($top)->text() .'< /a>、';    }    echo '#0#1</br>';    $companies = pq($first)->find('.mc dl');    $parent_id = $id;    foreach($companies as $company)    {          $id++;        $sparent_id = $id;       echo '&nbsp;&nbsp;' . $id . '#' .pq($company)->find('dt')->text() . '#' .  '< a href='' . pq($company)->find('dt a')->attr('href') . '' target='_blank'>' . pq($company)->find('dt')->text() .'< /a>#' . $parent_id .'#2<br>';        $cate = pq($company)->find('dd em a');       foreach($cate as $detail) {           $id++;           echo '&nbsp;&nbsp;&nbsp;&nbsp;' .  $id . '#' .pq($detail)->text() . '#' . '< a href=''. pq($detail)->attr('href') . '' target='_blank'>' . pq($detail)->text() .'< /a>#' . $sparent_id . '#3<br>';        }           }  }?>

      3、運行效果

      這樣可以抓取京東商品分類的信息了??梢约由?a href='http://www.49028c.com/tag/shujuku_5278_1.html' target='_blank'>數據庫,將數據保存在數據庫中,這樣可以更利于數據的保存和操作。雖然這里只是抓取京東商品的分類,如果延伸一下的話還可以抓取商品價格,好評差評等信息。這里就不一一細說了,具體問題具體解決,完全看需求。如果有需要的話還可以做成萬能的,輸入標簽的xpath,然后得到具體的值;這純屬YY,有興趣的可以網上找找資料,實現的方式應該也不少。

    PHP編程

    鄭重聲明:本文版權歸原作者所有,轉載文章僅為傳播更多信息之目的,如作者信息標記有誤,請第一時間聯系我們修改或刪除,多謝。

  • 發表評論 共有條評論
    用戶名: 密碼:
    驗證碼: 匿名發表
    亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb
    狠狠操狠狠色综合网| 日韩中文字幕视频在线| 亚洲无线码在线一区观看| 国语对白做受69| 成人精品视频在线| 日韩专区中文字幕| www.亚洲人.com| 亚洲欧美制服第一页| 在线成人激情黄色| 亚洲美女av在线播放| 日韩中文综合网| 久热精品在线视频| 美女久久久久久久久久久| 日韩免费观看网站| 国产精品丝袜高跟| 国产日本欧美一区| 青青草99啪国产免费| 久久免费视频观看| 一区二区成人精品| 国产精品久久久久久久久免费看| 亚洲www在线观看| 欧美精品在线第一页| 欧美最猛性xxxxx免费| 亚洲精品美女网站| 欧美一级大片在线观看| 欧美国产第一页| 高清欧美性猛交| 久久久精品久久久久| 国产成人aa精品一区在线播放| 这里只有精品视频在线| 国产一区二区日韩| 日韩精品极品视频| 午夜精品99久久免费| 欧美激情极品视频| 欧美午夜精品久久久久久久| 亚洲精品wwwww| 久久亚洲欧美日韩精品专区| 国产精品美女在线观看| 国内精品小视频| 欧美日韩一区免费| 欧美体内谢she精2性欧美| 中文字幕亚洲欧美在线| 欧美夜福利tv在线| 69精品小视频| 亚洲国产精彩中文乱码av在线播放| 亚洲一区二区三区在线视频| 欧美在线一级视频| 成人黄色av网| 国产精品美女999| 国产精品黄页免费高清在线观看| 精品偷拍一区二区三区在线看| 亚洲一区二区中文| 国产精品91久久| 亚洲人成在线播放| 国产精品尤物福利片在线观看| 日韩经典中文字幕| 88xx成人精品| 国产精品一区二区三区成人| 欧美成人精品激情在线观看| 国产精品视频男人的天堂| 97视频在线免费观看| 成人黄色影片在线| 亚洲一区二区三区四区在线播放| wwwwwwww亚洲| 精品欧美国产一区二区三区| 日韩亚洲欧美中文在线| 最新91在线视频| 亚洲精品国精品久久99热| 欧美韩国理论所午夜片917电影| 日韩欧美国产成人| 日本欧美爱爱爱| 国语自产精品视频在免费| 91麻豆国产语对白在线观看| 国产欧美精品在线播放| 毛片精品免费在线观看| 92国产精品久久久久首页| 色悠悠久久久久| 97视频在线观看免费| 亚洲精品资源在线| 精品久久久久久国产91| 91chinesevideo永久地址| 日韩精品在线观| 国产精品一香蕉国产线看观看| 国产精品高清在线| 日韩欧美在线视频日韩欧美在线视频| 精品欧美aⅴ在线网站| 国产精品影片在线观看| 国内揄拍国内精品少妇国语| 欧美精品亚州精品| 热久久免费视频精品| 色噜噜久久综合伊人一本| 日韩免费精品视频| 亚州国产精品久久久| 精品国内自产拍在线观看| 欧美在线精品免播放器视频| xvideos亚洲人网站| 欧美一级免费看| 欧洲精品在线视频| 欲色天天网综合久久| 精品一区二区亚洲| 最近的2019中文字幕免费一页| 91久久精品美女| 日韩在线播放视频| 日韩中文第一页| 欧美成人在线网站| 国产精品爽黄69| 欧美在线视频免费播放| 色阁综合伊人av| 中文字幕亚洲情99在线| 国产中文日韩欧美| 亚洲一区二区三区777| 亚洲精品v天堂中文字幕| 日韩精品有码在线观看| 亚洲欧美国产va在线影院| 不卡av在线网站| 欧美日韩性视频在线| 91精品国产高清久久久久久久久| 日韩精品中文字幕久久臀| 日韩精品高清在线观看| 欧美伊久线香蕉线新在线| 日韩免费av一区二区| 不用播放器成人网| 欧美精品一区三区| 久久亚洲精品一区二区| 日韩在线观看免费高清| 久久久久久97| 国产精品色悠悠| 亚洲国产精品嫩草影院久久| 日韩欧美中文免费| 久久国产精品偷| 亚洲国产99精品国自产| 亚洲欧美日韩国产成人| 精品一区电影国产| 欧美风情在线观看| 2020久久国产精品| 亚洲精品午夜精品| 国产美女久久精品香蕉69| 欧美性xxxxhd| 成人写真福利网| 国产精品91久久| 一本大道久久加勒比香蕉| 久久亚洲精品小早川怜子66| 欧美成人久久久| 精品国产91久久久久久老师| 国产一区二区av| 精品久久中文字幕| 亚洲精品国偷自产在线99热| 国内精品久久久久久久久| 麻豆国产va免费精品高清在线| 亚洲第一视频网站| 欧美大全免费观看电视剧大泉洋| 亚洲久久久久久久久久久| 97成人精品区在线播放| 精品久久久香蕉免费精品视频| 欧美大尺度在线观看| 91久久久久久久| 国产视频精品免费播放| 久久av资源网站| 精品久久久中文| 中文字幕亚洲综合久久筱田步美| www.日韩.com| xvideos亚洲| 91精品在线播放| 国产精品伦子伦免费视频|