真正意義上的網站分析是從服務器日志開始的，而且直到今天，分析服務器（也稱為server log file，或簡稱log file）日志仍然是網站分析的重要方法。

很多站長可能都知道網站LOG日志很重要，可能是因為密密麻麻的字符串讓人比較頭疼，所以很多人僅僅是知道，而沒有去深究，殊不知網站LOG日志能為我們做SEO提供非常大的幫助！下面我就再啰嗦一下網站LOG日志。

網站LOG日志是記錄web服務器接收處理請求以及運行時錯誤等各種原始信息的以（·log）結尾的文件。所以這是我們檢查網站SEO各項數據的一項重要指標。

什么情況下需要分析服務器日志？

既然服務器日志的分析這么復雜，我們有沒必要天天去分析服務器日志，那我們在什么情況下，才需要去分析服務器日志呢？對此，馬海祥建議你如果有如下的數據監測和分析的需要，你應該用日志分析方法了。

（1）、需要了解搜索引擎機器人或者其他非人為訪問流量，并且希望據此對網站進行針對性的優化，如通過分析搜索引擎的訪問行為來進行SEO。

（2）、需要了解除了普通的PC客戶端之外的上網設備對網站的訪問情況。

（3）、需要了解網站的文件資源是否被用戶完整的下載索取。

（4）、對網站流量信息具有極高的保密需要，不允許讓任何第三方染指或幫忙。

（5）、對于網站服務器的安全性和可維護性有要求，以及有非常顯著的反抗黑客或其他非授權訪問需求的。

一、查看目錄抓取概況
目錄抓取，可以清晰的查看到光顧網站的蜘蛛爬行過哪些目錄。要知道：有些目錄是沒有價值的，如一些圖標目錄、下載目錄、留言目錄等，還有后臺目錄、數據庫，如果任由蜘蛛爬行，也是一種安全隱患。另外一方面，搜索引擎對于不同的站點都有著抓取配額，無用目錄，更不要占用這樣的配額，以免減少有效配額的抓取量。

二、查看頁面抓取概況
頁面抓取可以準確的查看到蜘蛛爬行的每一個頁面，這也是對于LOG日志分析上非常重要的一個環節。如：多重URL鏈接的抓取?垃圾頁面的抓取?都是可以在其中展現出來的。甚至：某個頁面抓取頻率越高，通常代表這個頁面更有價值。

如果你想優化的頁面，抓取頻率偏低，那么就要為其增加適當的曝光度，來達成你想要的結果。

三、查看狀態碼信息
狀態碼分為兩種，一種是蜘蛛狀態碼，另一種是用戶狀態碼，通過蜘蛛狀態碼可以準確的查看到網站是否存在抓取問題。例如：404代表的是錯誤頁，301、302代表的是重定向，還有一些：504、500、等狀態碼，值得說的是：除去200狀態碼，出現其他的狀態碼都是應當值得注意的，當然，如果只是個別幾條則無需理會。但是如果數量一旦偏多，網站則100%出現問題了。

而用戶狀態碼，則代表用戶的訪問情況，在這其中可以清晰的看到用戶最為關注哪些頁面。不要認為這是小事情，懂得營銷的站長，知道投其所好!

通過分析服務器日志的數據，我們可以看出蜘蛛的活躍程度、親和程度、抓取深度等，總訪問次數、停留時間、抓取量越高、平均抓取頁面、平均停留時間，表明網站越受搜索引擎喜歡，對于重要目錄，我們可以通過內外調整增加權重及爬取，對于無效頁面，在robots文件進行屏蔽，進而有效的進行網站運營。