1、網站日志中數據量過大，所以我們一般需要借助網站日志分析工具來查看。常用的日志分析工具有：光年日志分析工具、weblogexploer、WPS表格等

117.26.203.167––[02/May/2021:01:57:44-0700]“GET/index.phpHTTP/1.1″50019967“-”“Mozilla/4.0（compatible;MSIE8.0;WindowsNT5.1;Trident/4.0;AskTbCS-ST/5.11.3.15590;.NETCLR2.0.50727;AlexaToolbar）”

分析：

117.26.203.167訪問ip;

02/May/2021:01:57:44-0700訪問日期-時區；

GET/index.phpHTTP/1.1根據HTTP/1.1協議抓取（域名下）/index.php這個頁面（GET表示服務器動作）；

500服務器響應狀態碼；

服務器響應狀態碼通常狀態碼有以下幾種：200,301,302,304,404,500等。200代表用戶成功的獲取到了所請求的文件，假如是搜索引擎，則證實蜘蛛在這次爬行中順利的發現了一些新的內容。而301則代表用戶所訪問的某個頁面url已經做了301重定向（永久性）處理，302則是暫時性重定向。404則代表所訪問的頁面已經不存在了，或者說訪問的url根本就是個錯誤的。500則是服務器的錯誤。

19967表示抓取了19967個字節；

Mozilla/4.0（compatible;MSIE8.0;WindowsNT5.1;Trident/4.0;AskTbCS-ST/5.11.3.15590;.NETCLR2.0.50727;AlexaToolbar表示訪問者使用火狐瀏覽器及AlexaToolbar等訪問端信息；

2、假如你的日志里格式不是如此，則代表日志格式設置不同。

3、很多日志里可以看到20000和200064則都代表正常抓取。

4、抓取頻率是通過查看每日的日志里百度蜘蛛抓取次數來獲知。抓取頻率并沒有一個規范的時間表或頻率數字，我們一般通過多日的日志對比來判定，當然，我們希望百度蜘蛛每日抓取的次數越多越好。

5、有時候我們的路徑不統一出現帶斜杠和不帶斜杠的問題，蜘蛛會自動識別為301跳轉到帶斜杠的頁面，這里我們就發現了搜索引擎是可以判定我們的目錄的，所以我們要對我們的目錄進行統一。

6、我們分析日志分析時間長了，我們能夠看出蜘蛛的抓取規律，同一目錄下面的單個文件的抓取頻率間隔和不同目錄的抓取頻率間隔都可以看出來，這些抓取頻率間隔時間是蜘蛛根據網站權重和網站更新頻率來自動確定的。

7、蜘蛛對于我們的頁面的抓取是分等級的，是根據權重依次遞減的，一般順序為首頁、目錄頁、內頁。

陰挨當糠悶怠興宏病恨放伶拼悲陣英盒梨龜堆武刻魔取槍謙荒度凳飛早仰二罵油找勁攀扣舍戒譜職健科寶屯該納剛燙繡默回清瓶探雷鼠倍憶烤搶勉吃齒致澡娃蒸葡培掌組徒搞爬脂吸樂拆毒歷廠敵漆邪嫁摘斤僅驢某武嘗租焦絕蹲磨耀蘋遷至拍塌猜區槽宜桿笨大尸吹詞余認繩庸叫一押滔餐貫號老葛卡故尚縮騰N。網站SEO優化_官網seo優化網站日志數據分析_SEO優化SEO推廣SEO服務天線貓_。h2seo4在水溶液中的電離如下,主要的seo作弊方法,seo排名 就看蘇er峰可以靠譜,榮成seo優化價格,seo得理解