亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 網站 > 建站經驗 > 正文

非常好的網站生成靜態頁面防采集策略與方法

2019-11-02 16:55:20
字體：大 中 小
來源：轉載
供稿：網友
目前防采集的方法有很多種，先介紹一下常見防采集策略方法和它的弊端及采集對策： 

一、判斷一個IP在一定時間內對本站頁面的訪問次數，如果明顯超過了正常人瀏覽速度，就拒絕此IP訪問

    弊端：

    1、此方法只適用于動態頁面，如：asp/jsp/php等...靜態頁面無法判斷某個IP一定時間訪問本站頁面的次數。

    2、此方法會嚴重影響搜索引擎蜘蛛對其收錄，因為搜索引擎蜘蛛收錄時，瀏覽速度都會比較快而且是多線程。此方法也會拒絕搜索引擎蜘蛛收錄站內文件

    采集對策：只能放慢采集速度，或者不采

    建議：做個搜索引擎蜘蛛的IP庫，只允許搜索引擎蜘蛛快速瀏覽站內內容。搜索引擎蜘蛛的IP庫的收集，也不太容易，一個搜索引擎蜘蛛，也不一定只有一個固定的IP地址。

    評論：此方法對防采集比較有效，但卻會影響搜索引擎對其收錄。

    二、用javascript加密內容頁面

    弊端：此方法適用于靜態頁面，但會嚴重影響搜索引擎對其收錄情況，搜索引擎收到到的內容，也都是加密后的內容

    采集對策：建議不采，如非要采，就把解密碼的JS腳本也采下來。

    建議：目前沒有好的改良建議

    評論：建議指望搜索引擎帶流量的站長不要使用此方法。

    三、把內容頁面里的特定標記替換為”特定標記+隱藏版權文字“

    弊端：此方法弊端不大，僅僅會增加一點點的頁面文件大小，但容易反采集

    采集對策：把采集來的含有隱藏版權文字內容的版權文字替掉，或替換成自己的版權。

    建議：目前沒有好的改良建議

    評論：自己感覺實用價值不大，就算是加上隨機的隱藏文字，也等于畫蛇添足。

    四、只允許用戶登陸后才可以瀏覽

    弊端：此方法會嚴重影響搜索引擎蜘蛛對其收錄

    采集對策：目前落伍已經有人發了對策文章 ，具體對策就看這個吧《ASP小偷程序如何利用XMLHTTP實現表單的提交以及cookies或session的發送》

    建議：目前沒有好的改良建議

    評論：建議指望搜索引擎帶流量的站長不要使用此方法。不過此方法防一般的采集程序，還是有點效果的。

    五、用javascript、vbscript腳本做分頁

    弊端：影響搜索引擎對其收錄

    采集對策：分析javascript、vbscript腳本，找出其分頁規則，自己做個對應此站的分頁集合頁即可。

    建議：目前沒有好的改良建議

    評論：感覺懂點腳本語言的人都能找出其分頁規則

    六、只允許通過本站頁面連接查看，如：Request.ServerVariables("HTTP_REFERER")

    弊端：影響搜索引擎對其收錄

    采集對策：不知道能不能模擬網頁來源。。。。目前我沒有對應此方法的采集對策

    建議：目前沒有好的改良建議

    評論：建議指望搜索引擎帶流量的站長不要使用此方法。不過此方法防一般的采集程序，還是有點效果的。

    從以上可以看出，目前常用的防采集方法，要么會對搜索引擎收錄有較大影響，要么防采集效果不好，起不到防采集的效果。那么，還有沒有一種有效防采集，而又不影響搜索引擎收錄的方法呢？那就請繼續往下看吧！

發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb
亚洲毛片在线观看.| 91tv亚洲精品香蕉国产一区7ujn| 日韩黄色在线免费观看| 久久精品视频亚洲| 77777少妇光屁股久久一区| 中文字幕亚洲自拍| 91精品国产九九九久久久亚洲| 欧美专区日韩视频| 91麻豆桃色免费看| 97视频在线观看免费| 亚洲japanese制服美女| 中文字幕免费国产精品| 国产精品久久久久久久久久新婚| 97热在线精品视频在线观看| 中文字幕欧美在线| 日韩成人激情影院| 久久综合久久美利坚合众国| 日韩一级黄色av| 久久久久久综合网天天| 日韩色av导航| 国产精品丝袜久久久久久不卡| 欧美高清视频一区二区| 亚洲精品久久在线| 日本三级韩国三级久久| 日韩精品电影网| 日韩在线观看免费全| 伊人一区二区三区久久精品| 欧美成人亚洲成人| 欧美日韩精品在线| 国产精品福利在线观看| 欧美成人免费网| 国产玖玖精品视频| 国产丝袜视频一区| 精品国产乱码久久久久酒店| 国产美女久久精品香蕉69| 国色天香2019中文字幕在线观看| 亚洲视频电影图片偷拍一区| 国产一区二区日韩精品欧美精品| 精品亚洲永久免费精品| 国产不卡一区二区在线播放| 青青草成人在线| 欧美刺激性大交免费视频| 成人福利视频网| 午夜欧美不卡精品aaaaa| 国产精品久久久av久久久| 疯狂做受xxxx高潮欧美日本| 日韩av在线免费看| 国产精品国产福利国产秒拍| 国产精品久久久久久久久免费看| 日韩国产在线播放| 亚洲欧美国产精品va在线观看| 精品中文字幕在线2019| 欧美一级黄色网| 亚洲bt欧美bt日本bt| 91性高湖久久久久久久久_久久99| 欧美性生活大片免费观看网址| 国产一区二区三区视频免费| 亚洲午夜性刺激影院| 7777免费精品视频| 91高潮精品免费porn| 日本91av在线播放| 国产乱肥老妇国产一区二| 乱亲女秽乱长久久久| 久久久久国产精品免费| 97激碰免费视频| 国产精品入口夜色视频大尺度| 国产成人精品午夜| 成人免费福利视频| 欧洲精品毛片网站| 日本成人在线视频网址| 国产精品免费电影| 91免费人成网站在线观看18| 国产欧美亚洲精品| 欧美日韩一区二区在线| 精品国产一区二区三区久久狼黑人| 久久综合国产精品台湾中文娱乐网| 亚洲人成在线观看| 最近2019中文字幕mv免费看| 俺也去精品视频在线观看| 欧美激情国产精品| 国内精品小视频| 久热爱精品视频线路一| 亚洲大胆人体视频| 久久国产精品首页| 92国产精品久久久久首页| 国产一区二区美女视频| 91极品视频在线| 欧美大荫蒂xxx| 欧美激情网友自拍| 成人网页在线免费观看| 欧美裸体男粗大视频在线观看| 久久久久久久久久久人体| 欧美资源在线观看| 欧美色视频日本高清在线观看| 欧美夫妻性生活视频| 欧美性生交xxxxxdddd| 欧美午夜精品久久久久久浪潮| 久久久亚洲网站| 亚洲肉体裸体xxxx137| 欧美一级淫片aaaaaaa视频| 色狠狠久久aa北条麻妃| 欧美性开放视频| 国产精品69精品一区二区三区| 亚洲国内高清视频| 欧美大片欧美激情性色a∨久久| 久久精品美女视频网站| 欧美一区视频在线| 亚洲电影在线看| 午夜精品一区二区三区在线视频| 欧美性视频网站| 亚洲精品国产精品国自产在线| 国产精品日韩专区| 日本伊人精品一区二区三区介绍| 亚洲国产欧美一区二区丝袜黑人| www.国产一区| 亚洲精品电影在线观看| 不卡在线观看电视剧完整版| 亲爱的老师9免费观看全集电视剧| 亚洲一区二区三区乱码aⅴ蜜桃女| 2018中文字幕一区二区三区| 97国产真实伦对白精彩视频8| 成人黄色大片在线免费观看| 亚洲第一天堂无码专区| 久久久精品国产亚洲| 精品爽片免费看久久| 精品国产91久久久久久| 日韩精品中文字幕在线| 欧美日韩精品在线| 久久频这里精品99香蕉| 国产成人avxxxxx在线看| 欧洲美女7788成人免费视频| 久久免费观看视频| 亚洲人成欧美中文字幕| 国产精品999999| 午夜剧场成人观在线视频免费观看| 亚洲免费视频在线观看| 一道本无吗dⅴd在线播放一区| 亚洲精品综合久久中文字幕| 在线播放日韩精品| 亚洲精品国精品久久99热一| xxxx欧美18另类的高清| 狠狠色狠狠色综合日日小说| 91视频国产高清| 久久久精品国产网站| 精品毛片三在线观看| 国产亚洲激情视频在线| 国产这里只有精品| 欧美肥臀大乳一区二区免费视频| 亚洲成人久久网| 亚洲第一区第一页| 日韩美女在线观看一区| 在线电影中文日韩| 国内精品久久久久影院优| 久久国产精品久久久久久久久久| 成人午夜高潮视频| 亚洲欧洲在线播放| 欧美激情综合亚洲一二区| 欧美在线观看一区二区三区| 亚洲成人久久久久| 日韩成人在线网站| 欧美性xxxxx极品| 在线观看国产精品日韩av| 日本精品免费一区二区三区| 26uuu亚洲伊人春色|