網絡日志
作者:聚擎
瀏覽:1054次
發(fā)布時間:2017-06-15




一。 網站日志概念:
網站日志是記錄web服務器接收處理請求以及運行時錯誤等各種原始信息的以.log結尾的文件,確切的講,應該是服務器日志。網站日志最大的意義是記錄網站運營中比如空間的運營情況,被訪問請求的記錄。通過網站日志可以清楚的得知用戶在什么IP、什么時間、用什么操作系統、什么瀏覽器、什么分辨率顯示器的情況下訪問了你網站的哪個頁面,是否訪問成功。
二。 查看網絡日志的意義:
1、網站剛上線,看搜索引擎蜘蛛的抓取情況;
2、網站收錄異常,對比日志中蜘蛛的行為情況;
3、解決網站被封問題時,觀察日志情況。
三。 通過網絡日志查看不同的引擎的爬行
1. 蜘蛛名稱:百度->baiduspider、Google ->Googlebot、Msn ->msnbot、yahoo ->Slurp、yodao ->YoudaoBot、sogou ->Sogou+get+spider
2. 發(fā)現比較多的HTTP狀態(tài)碼是,200(正常)、304(沒變化)、404(錯誤鏈接)