亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 網站 > 優化推廣 > 正文

搜索引擎蜘蛛爬行網站足跡解讀

2024-04-26 14:08:46
字體:
來源:轉載
供稿:網友
你把IIS日志從空間下到本地,然后用文本工具打開;

  2010-05-14 15:52:03 W3SVC1 121。187。5。143 GET /category-8-b0-min1100-max2200.html - 80 - 220.181.7.74 Baiduspider+(+baidu/search/spider.htm) 200 0 0

  分析下 200 0 0組成部分 sc-status(協議狀態) sc-substatus(協議子狀態) sc-win32-status(Win32狀態碼)

  sc-status(協議狀態): 200 連接成功

  sc-substatus(協議子狀態) :0 成功

  sc-win32-status(Win32狀態碼):0 代表抓取成功并帶回數據庫 ; 64 指定的網絡名不再可用

  1: 在這個訪問記錄里面121.187.5.143是你服務器的IP地址,220.181.7.74 是bd蜘蛛的IP,/category-8-b0-min1100-max2200.html 為蜘蛛訪問你的頁面 80是端口 GET是打開方式 W3SVC1是記錄的文件夾,這里說明,bd蜘蛛已經訪問了你的category-8-b0- min1100-max2200.html 這個頁面,那么最重要的是最后面的這個參數200 0 0。

  2、200 0 0 成功訪問該頁面,0代表抓取成功并帶回數據庫。這個時候你就放心了,這個頁面已經被bd收錄,但是還沒有釋放出來,bd更新時就可能釋放出來。

  3:200 0 64 網絡上流傳著這么三種解釋第一:64為K站的前兆。第二64的出現只是64位操作系統。第三:網絡不可達,由于某種原因無法完全打開頁面,或者網絡不穩定這些原因,導致蜘蛛無法帶回頁面或者說不抓取該頁面,所以200 0 64的解釋也應該為:訪問了該頁面,但并沒有任何抓取也沒有帶回數據庫。這種原因多為空間不穩定、服務器不穩定。

  4:304 0 0這個返回碼代表蜘蛛訪問的頁面沒有更新,和他之前來的時候是一樣的,所以看到這個不要擔心,蜘蛛來過,只不過你沒有更新,所以他也不愿意帶走這個頁面。

  5:404 0 0這個是代表404頁面,但是有個很嚴重的問題,這個返回碼告訴我們,蜘蛛來到了404頁面并把他帶走了,崩潰~~~~,要是這樣的話基本上你要倒霉了,要你有太多的404,那么蜘蛛就會不斷是抓取,不斷的帶走,這樣會造成無數的重復頁面,最終導致K站或者降權,正確的返回罵是404 0 64 這就代表蜘蛛沒有抓取你這個頁面。

  6:500錯誤500錯誤是服務器內部錯誤,是由程序的錯誤造成的,我不懂程序,但是500錯誤是會給你減分的,這點基本的邏輯都可以想的到,要發現500錯誤,馬上查看是哪個頁面的,然后去修正以下錯誤吧!

  7:302要在日志中發現302的返回碼也是需要注意的,302為臨時重定向,要你是長期的將這個頁面重定向到另一個頁面,麻煩你使用301永久重定向,要是302的話bd蜘蛛下次來還會訪問這個頁面,這樣又會造成復制大量頁面的問題,結果肯定是K,所以,抽空檢查以下。

  陳中平的回復:

  每個網絡蜘蛛都有自己的名字,在抓取網頁的時候,都會向網站標明自己的身份。網絡蜘蛛在抓取網頁的時候會發送一個請求,這個請求中就有一個字段為User-agent,用于標識此網絡蜘蛛的身份。例如Google網絡蜘蛛的標識為GoogleBot,Baidu網絡蜘蛛的標識為BaiDuSpider,Yahoo網絡蜘蛛的標識為Inktomi Slurp。如果在網站上有訪問日志記錄,網站管理員就能知道,哪些搜索引擎的網絡蜘蛛過來過,什么時候過來的,以及讀了多少數據等等。

  通過ftp,查看到后臺有一個包含“log”的文件。這個文件就是日志。通過查看日志中是否有baiduspider的腳印。有baiduspider就說明bd蜘蛛來過網站。

  小刀SEO 的回復:

  網站日志一般存放在虛擬主機的logfiles文件夾下,可以通過FTP工具將網站日志下載下來,通過txt文檔方式查看。

發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb
美女久久久久久久久久久| 亚洲人成人99网站| 亚洲图片制服诱惑| 亚洲午夜女主播在线直播| 精品久久久91| 日韩中文字幕在线视频播放| 国产高清视频一区三区| 欧美丰满老妇厨房牲生活| 欧美日韩在线视频首页| 欧美国产中文字幕| 日韩免费观看网站| 国产97在线|亚洲| 性欧美xxxx交| 成人黄色片在线| 国产精品视频久久久| 亚洲欧美制服第一页| 中文日韩在线视频| 国产精品草莓在线免费观看| 精品国偷自产在线视频99| 欧美激情视频在线免费观看 欧美视频免费一| 精品国产1区2区| 久久久精品国产网站| 亚洲精品白浆高清久久久久久| 情事1991在线| 最新国产成人av网站网址麻豆| 久久伊人精品视频| 国内精品久久久久久影视8| 国产日韩在线精品av| 国产一区二区三区视频在线观看| 欧美激情va永久在线播放| 国产精品男女猛烈高潮激情| 色午夜这里只有精品| 精品亚洲国产视频| 久久精品亚洲国产| 亚洲a∨日韩av高清在线观看| 国模精品系列视频| 亚洲天堂av在线免费观看| 亚洲第一区在线| 国产97色在线| 最近2019年中文视频免费在线观看| 日韩经典一区二区三区| 国产精品嫩草视频| 亚洲电影免费观看高清完整版在线| 国产精品自产拍高潮在线观看| 中文字幕精品国产| 91爱视频在线| 日韩中文av在线| 欧美精品免费看| 久久九九精品99国产精品| 欧美黑人性视频| 中文字幕精品av| 国内免费精品永久在线视频| 欧美特级www| 久久精品免费播放| 国产91亚洲精品| 色综合色综合网色综合| 欧美精品做受xxx性少妇| 欧美亚洲成人网| 精品国产老师黑色丝袜高跟鞋| 国产精品美女久久久久av超清| 日韩中文av在线| 538国产精品一区二区免费视频| 日韩精品高清视频| 亚洲成年人在线播放| 日本精品久久电影| 91香蕉亚洲精品| 色yeye香蕉凹凸一区二区av| 九九久久久久久久久激情| 欧美影院在线播放| 青青草99啪国产免费| 国产成人中文字幕| 精品久久久久久中文字幕| 精品国产鲁一鲁一区二区张丽| 在线观看欧美www| 欧美黑人视频一区| 国产精品久久久久久搜索| 中文字幕亚洲在线| 久久精品国产免费观看| 日韩激情视频在线| 久久99热这里只有精品国产| 亚洲国产精品嫩草影院久久| 97av在线视频免费播放| 亚洲国产欧美一区二区三区同亚洲| 法国裸体一区二区| 欧美理论片在线观看| 久久精品中文字幕一区| 中文字幕免费精品一区| 91久久国产精品91久久性色| 精品久久久精品| 亚洲成人精品视频| 欧美性猛交xxxx乱大交| 51精品在线观看| 91国产美女在线观看| 亚洲自拍偷拍一区| 日韩免费在线看| 亚洲成人中文字幕| 韩剧1988免费观看全集| 国产在线视频2019最新视频| 午夜免费在线观看精品视频| 欧美人与物videos| 一区二区欧美在线| 国产亚洲精品久久久久动| 国产日韩欧美成人| 在线观看国产精品淫| 亚洲精品免费网站| 欧美成人免费一级人片100| 中文字幕久久久av一区| 欧美色道久久88综合亚洲精品| 美女福利视频一区| 欧美老妇交乱视频| 欧美日韩免费看| 国产精品福利在线观看| 亚洲视频在线观看免费| 亚洲国产精品嫩草影院久久| 欧美日韩在线观看视频小说| 91po在线观看91精品国产性色| 岛国精品视频在线播放| 亚洲精品成人免费| 亚洲精品小视频| 亚洲xxxx做受欧美| 成人美女免费网站视频| 美女视频久久黄| 亚洲男子天堂网| 久久亚洲一区二区三区四区五区高| 久久久久久伊人| www.久久撸.com| 成人免费激情视频| 国产美女91呻吟求| 中文字幕视频在线免费欧美日韩综合在线看| 久久久久久久亚洲精品| 精品国产自在精品国产浪潮| 国语自产偷拍精品视频偷| 国产啪精品视频网站| 欧美交受高潮1| 欧美激情精品久久久久久变态| 欧洲成人在线视频| 亚洲成av人乱码色午夜| 91色视频在线观看| 超薄丝袜一区二区| 中文字幕自拍vr一区二区三区| 国内自拍欧美激情| 国产性色av一区二区| 欧美成人免费va影院高清| 国产亚洲欧美日韩美女| 人九九综合九九宗合| 亚洲精品成人久久久| 国产免费一区二区三区在线观看| 2025国产精品视频| 欧美一性一乱一交一视频| 午夜精品久久久久久久99热浪潮| 色99之美女主播在线视频| 羞羞色国产精品| 8050国产精品久久久久久| 欧美亚洲免费电影| 亚洲2020天天堂在线观看| 色无极影院亚洲| 性欧美办公室18xxxxhd| 亚洲成色777777女色窝| 一区二区三区在线播放欧美| 亚洲人成自拍网站| 欧美国产精品va在线观看| 亚洲一区二区三区视频| 97在线免费观看| 韩剧1988在线观看免费完整版|