其實我們做seo網(wǎng)站優(yōu)化的一般來說都是一個全知全能的職位，因為做優(yōu)化做排名影響的因素太多了，就比如我們今天要講的課題，日志的分析如果不會分析看不懂蜘蛛的爬行軌跡，那么在優(yōu)化的過程中出現(xiàn)問題，就很有可能思路是錯的而不自知。

IIS日志的用途就是能夠觀察搜索引擎的蜘蛛來我們網(wǎng)站的爬取情況，可以更近距離的分析和接觸蜘蛛。爬取次數(shù)，爬取時間點，爬取高峰期，爬取反應出來的HTTP狀態(tài)碼，為我們帶來清晰的分析便利。

一、各大搜索引擎的蜘蛛名稱：

百度(Baidu)爬蟲名稱(Baiduspider)

谷歌(Google)爬蟲名稱(Googlebot)

雅虎(Yahoo)爬蟲名稱(YahooSlurp)

有道(Yodao)蜘蛛名稱(YodaoBot)

搜狗(sogou)蜘蛛名稱(sogouspider)

MSN的蜘蛛名稱：msnbot

二、IIS分析：

案例日志：61.135.168.22--[11/Jan/2009:04:02:45+0800]"GET/thread-7303-1-1.htmlHTTP/1.1"2008450"-""Baiduspider(+http:-www-baidu-com/search/spider.htm)"

分析：

1、61.135.168.22是訪問了是服務器IP為這個的網(wǎng)站.

2、11/Jan/2009:04:02:45表示蜘蛛爬行時間

3、GET/thread-7303-1-1.htmlHTTP，表示蜘蛛抓取了這個頁面。

4、200狀態(tài)碼表示蜘蛛抓取頁面成功;404表示蜘蛛抓取頁面失敗。

5、8450表示此次抓取了8450個字節(jié)

6、Baiduspider(+http:-www-baidu-com/search/spider.htm)表示百度蜘蛛的名稱

三、基本狀態(tài)碼：

200：請求已經(jīng)完成，蜘蛛訪問頁面正常

301：已經(jīng)移動，永久重定向

302：臨時重定向

304：蜘蛛爬取后發(fā)現(xiàn)，頁面沒有修改

305：使用代理

400：請求錯誤

404：找不到頁面

四、IIS詳細狀態(tài)碼含義：

100-表示已收到請求的一部分，正在繼續(xù)發(fā)送余下部分。

101-切換協(xié)議。

2XX-成功服務器成功地接受了客戶端請求。(只要是2XX的狀態(tài)，都表示成功)

200-確定?？蛻舳苏埱笠殉晒?。

201-已創(chuàng)建。

202-已接受。

203-非權威性信息。

204-無內容。

205-重置內容。

206-部分內容。

300-針對收到請求，服務器可執(zhí)行多種操作。

301-永久移動轉移，請求的內容已永久移動其他新位置。

302-臨時移動轉移，請求的內容已臨時移動新的位置

304-未修改。自從上次請求后，請求的內容未修改過。

307-臨時重定向。服務器目前從不同位置響應請求，但請求者應繼續(xù)使用原有位置來進行以后的請求。

400-錯誤的請求。

401-訪問被拒絕。IIS定義了許多不同的401錯誤，它們指明更為具體的錯誤原因。這些具體的錯誤代碼在瀏覽器中顯示，但不在IIS日志中顯示：

401.1-登錄失敗。

401.2-服務器配置導致登錄失敗。

401.3-由于ACL對資源的限制而未獲得授權。

401.4-篩選器授權失敗。

401.5-ISAPI/CGI應用程序授權失敗。

401.7-訪問被Web服務器上的URL授權策略拒絕。這個錯誤代碼為IIS6.0所專用。

403-禁止訪問：IIS定義了許多不同的403錯誤，它們指明更為具體的錯誤原因：

403.1-執(zhí)行訪問被禁止。

403.2-讀訪問被禁止。

403.3-寫訪問被禁止。

403.4-要求SSL.

403.5-要求SSL128.

403.6-IP地址被拒絕。

403.7-要求客戶端證書。

403.8-站點訪問被拒絕。

403.9-用戶數(shù)過多。

403.10-配置無效。

403.11-密碼更改。

403.12-拒絕訪問映射表。

403.13-客戶端證書被吊銷。

403.14-拒絕目錄列表。

403.15-超出客戶端訪問許可。

403.16-客戶端證書不受信任或無效。

403.17-客戶端證書已過期或尚未生效。

403.18-在當前的應用程序池中不能執(zhí)行所請求的URL.這個錯誤代碼為IIS6.0所專用。

403.19-不能為這個應用程序池中的客戶端執(zhí)行CGI.這個錯誤代碼為IIS6.0所專用。

403.20-Passport登錄失敗。這個錯誤代碼為IIS6.0所專用。

404-未找到請求的內容。

404.0-未找到文件或目錄。

404.1-無法在所請求的端口上訪問Web站點。

404.2-Web服務擴展鎖定策略阻止本請求。

404.3-MIME映射策略阻止本請求。

405-用來訪問本頁面的HTTP謂詞不被允許(方法不被允許)

406-客戶端瀏覽器不接受所請求頁面的MIME類型。

407-要求進行代理身份驗證。

412-前提條件失敗。

413-請求實體太大。

414-請求URI太長。

415-不支持的媒體類型。

416-所請求的范圍無法滿足。

417-執(zhí)行失敗。

423-鎖定的錯誤。

500-服務器內部錯誤。

500.12-應用程序正忙于在Web服務器上重新啟動。

500.13-Web服務器太忙。

500.15-不允許直接請求Global.asa.

500.16-UNC授權憑據(jù)不正確。這個錯誤代碼為IIS6.0所專用。

500.18-URL授權存儲不能打開。這個錯誤代碼為IIS6.0所專用。

500.100-內部ASP錯誤。

501-服務器無法完成請求的功能。

502-服務器用作網(wǎng)關或代理服務器時收到了無效響應。

502.1-CGI應用程序超時。

502.2-CGI應用程序出錯。

503-服務不可用。這個錯誤代碼為IIS6.0所專用。

504-網(wǎng)關超時。

505-HTTP版本不受支持。

網(wǎng)頁標題：詳細羅列出各個搜索引擎蜘蛛日志及服務器常見狀態(tài)碼含義
網(wǎng)站地址：http://www.aaarwkj.com/news8/253108.html

成都網(wǎng)站建設公司_創(chuàng)新互聯(lián)，為您提供ChatGPT、動態(tài)網(wǎng)站、企業(yè)網(wǎng)站制作、網(wǎng)站制作、服務器托管、商城網(wǎng)站

廣告

聲明：本網(wǎng)站發(fā)布的內容（圖片、視頻和文字）以用戶投稿、用戶轉載內容為主，如果涉及侵權請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內容未經(jīng)允許不得轉載，或轉載時需注明來源： 創(chuàng)新互聯(lián)