亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 網站 > 建站經驗 > 正文

batchcollect pagecollect來自官方杰奇jieqi定時采集配置方法參

2019-11-02 17:03:54
字體：大 中 小
來源：轉載
供稿：網友
前言

要實現采集，默認方式是根據配置好的采集規則，在瀏覽器提交相應的參數即可完成后面的采集入庫全部動作。

而實現定時采集，與人工在瀏覽器提交有些區別，主要分兩大步驟：

一、編寫采集的url和相關參數，訪問這個url即可實現想要的采集模式。（這個url直接在瀏覽器提交同樣可以實現采集）

二、把定時訪問這個url的功能加到系統的定時任務里面，實現無人值守的定時采集。

具體實現方法請參考下面內容：

1、對采集配置文件的解釋

任何一個采集都會用到兩個采集配置文件（跟后臺采集規則配置對應），都可以用文本編輯器打開查看。

其中 /configs/article/collectsite.php 是對總的采集站點配置，記錄了一共允許采集哪幾個站點。

里面包含類似這樣的內容：

$jieqiCollectsite['1']['name'] = '采集站點一'; 

$jieqiCollectsite['1']['config'] = 'abc_com'; 

$jieqiCollectsite['1']['url'] = 'http://www.abc.com'; 

$jieqiCollectsite['1']['subarticleid'] = 'floor($articleid/1000)';

$jieqiCollectsite['1']['enable'] = '1';

$jieqiCollectsite['2']['name'] = '采集站點二';

$jieqiCollectsite['2']['config'] = 'def_net';

$jieqiCollectsite['2']['url'] = 'http://www.def.net';

$jieqiCollectsite['2']['subarticleid'] = '';

$jieqiCollectsite['2']['enable'] = '1';

參數含義解釋如下：

['1'] - 這里的 1 表示采集網站的數字序號，不同的采集站序號不能重復。

['name'] - 采集網站名稱。

['config'] - 網站英文標識，這個網站采集規則配置文件有關，比如這個值是 abc_com ，那么采集規則配置文件就是 /configs/article/site_abc_com.php。

['url'] - 采集網站網址。

['subarticleid'] - 采集網站，文章子序號運算方式，本項目主要為了兼容以前程序，新版本里面文章子序號可以通過采集獲得。

['enable'] - 是否允許采集，1 表示允許，0 表示禁止，默認為 1。

如前面所說，每個采集網站有個專門的采集規則配置文件，/configs/article/ 目錄下以 site_ 開頭的php文件，如 /configs/article/site_abc_com.php。

里面內容都與后臺采集規則設置相對應，具體細節不一一解釋。需要了解的是本文件里面內容分兩大部分，前面內容都是對網站內容采集規則的配置，而最后面 $jieqiCollect['listcollect']['0']，$jieqiCollect['listcollect']['1'] 這樣的設置是對網站"批量采集規則"的配置，比如按最近更新采集、按排行榜采集，可以設置多個。['0'] 這里的數字 0 表示批量采集類別的數字序號，同一個網站也不能重復。

2、編寫采集內容的url及參數

這里的采集是針對多篇文章批量采集，分兩種模式：

一、按頁面批量采集，比如采集最新更新列表或者排行榜列表，每個鏈接采集一頁。

鏈接格式如下：

http://www.jb51.net/modules/article/admin/pagecollect.php?action=collect&siteid=1&collectname=0&startpageid=1&maxpagenum=1¬addnew=0&jieqi_username=admin&jieqi_userpassword=1234

參數含義解釋如下：

www.jb51.net - 是指您的網址。

action - 字符串，程序執行的動作命令，固定值為 collect。

siteid - 數字類型，要采集的網站序號，具體哪個網站對應什么序號見配置文件collectsite.php。

發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb
2019中文在线观看| 国产精品久久久久久久午夜| 欧美床上激情在线观看| 日韩欧美第一页| 91亚洲精品久久久| 欧美极品欧美精品欧美视频| 久久躁日日躁aaaaxxxx| 尤物九九久久国产精品的特点| 国产ts人妖一区二区三区| 日韩av成人在线| 亚洲男人的天堂在线播放| 日韩av在线免费观看一区| 久久久国产精品视频| 国产精品久久久久久久久久久久| 国产成人精品在线| 色综合久久久888| 国产欧美日韩精品在线观看| 中文字幕综合在线| 日韩av综合中文字幕| 亚洲精品乱码久久久久久金桔影视| 91精品视频大全| 免费91麻豆精品国产自产在线观看| 一区二区日韩精品| 亚洲影视九九影院在线观看| 97国产精品人人爽人人做| 国产美女搞久久| 欧美成人黄色小视频| 国产精品免费久久久| 国产午夜精品全部视频播放| 国产精品视频免费在线观看| 国产美女久久精品香蕉69| 亚洲成色www8888| 亚洲国产三级网| 一本色道久久88精品综合| 亚洲美女在线看| 国产丝袜一区二区三区| 亚洲高清久久久久久| 国产精品美女免费视频| 久久全国免费视频| 中文字幕亚洲综合久久| 一区二区三区亚洲| 久久97精品久久久久久久不卡| 日韩精品在线观看一区| 欧美性受xxxx黑人猛交| 欧美高清视频免费观看| 成人做爰www免费看视频网站| 另类专区欧美制服同性| 亚洲xxxx视频| 欧美亚洲成人免费| 欧美综合在线观看| 日韩在线观看视频免费| 久久视频免费观看| 日本一区二区三区在线播放| 亚洲天堂日韩电影| 亚洲自拍偷拍网址| 日韩欧美中文字幕在线播放| 成人国产精品一区| 最近中文字幕日韩精品| 国产精品专区h在线观看| 日韩美女在线看| 清纯唯美亚洲综合| 91社区国产高清| 精品久久香蕉国产线看观看亚洲| 亚洲japanese制服美女| 92福利视频午夜1000合集在线观看| 欧美华人在线视频| 亚洲一品av免费观看| 欧美多人爱爱视频网站| 热草久综合在线| 欧美精品一区二区三区国产精品| 亚洲高清一区二| 精品调教chinesegay| 欧美超级乱淫片喷水| 日韩中文字幕视频在线观看| 亚洲欧洲在线观看| 亚洲视频网站在线观看| 亚洲视频电影图片偷拍一区| 欧美电影在线观看高清| 亚洲图片欧洲图片av| 亚洲国产精品资源| 国产日本欧美一区| 亚洲二区在线播放视频| 中文字幕欧美精品日韩中文字幕| 久久手机免费视频| 亚洲嫩模很污视频| 欧美老女人xx| 91精品国产综合久久香蕉的用户体验| 亚洲精品国产成人| 亚洲白虎美女被爆操| 成人国产精品免费视频| 成人午夜激情免费视频| 国产成人综合亚洲| 欧美极品少妇xxxxx| 久操成人在线视频| 精品亚洲aⅴ在线观看| 亚洲视频在线观看| 久久这里只有精品视频首页| 国产精品色午夜在线观看| 亚洲美女在线看| 日本欧美一二三区| 欧美视频在线观看免费网址| 国产精品男人的天堂| 国模精品视频一区二区| 日韩成人高清在线| 在线观看亚洲区| 色偷偷av一区二区三区乱| 91久久夜色精品国产网站| 亚洲裸体xxxx| 91精品久久久久久久久久| 91久久精品国产| 欧美激情亚洲视频| 国内精品久久久久久久久| 日韩视频在线观看免费| 国产一区二区久久精品| 国产精品福利网站| 国产成人久久久精品一区| 国产精品一久久香蕉国产线看观看| 精品国产精品三级精品av网址| 中文字幕欧美精品日韩中文字幕| 精品在线观看国产| 51午夜精品视频| 欧美人在线观看| 国产精品久久久久久久午夜| 亚洲成色777777在线观看影院| 91精品国产自产91精品| 97婷婷涩涩精品一区| 91精品久久久久久久久久| 国产在线拍揄自揄视频不卡99| 亚洲一区二区三区四区视频| 日韩女优在线播放| 欧美限制级电影在线观看| 欧美老女人www| 91av视频在线| 欧美最猛性xxxxx(亚洲精品)| 97精品国产97久久久久久免费| 欧美自拍视频在线观看| 久久久久久国产三级电影| 国产一区二区三区精品久久久| 欧美日韩中文字幕在线| 亚洲欧美日韩第一区| 国产精品精品视频| 日韩中文理论片| 日韩在线观看免费av| 欧美午夜精品伦理| 国产精品一香蕉国产线看观看| 国产日产亚洲精品| 日韩精品中文字幕在线| 国产欧美最新羞羞视频在线观看| 国产精品羞羞答答| 久久视频免费观看| 91国产视频在线| 亚洲第一视频在线观看| 国产精品白丝av嫩草影院| 欧美电影免费在线观看| 国产精品久久一区| 久久久久999| 伊人伊成久久人综合网站| 懂色av一区二区三区| 国产亚洲精品日韩| 久久精品中文字幕| 91国产精品视频在线| 中文字幕av一区中文字幕天堂| 欧美一级淫片videoshd| 久久国产一区二区三区|