一直以來(lái)，總認(rèn)為小網(wǎng)站的結(jié)構(gòu)非常簡(jiǎn)單，頁(yè)面數(shù)量非常少，一般情況下搜索引擎是可以輕而易舉的抓取和收錄，加上關(guān)鍵詞并不是特別熱門(mén)，所以不用三天兩頭的查看網(wǎng)站日志。但是后來(lái)發(fā)現(xiàn)，事實(shí)并非如此：網(wǎng)站雖小并不代表沒(méi)有問(wèn)題，結(jié)構(gòu)簡(jiǎn)單并不等于完全收錄，也不等于容易獲得好的排名。

　　網(wǎng)站日志是記錄服務(wù)器的日常動(dòng)態(tài)，特別是搜索引擎爬行和抓取的動(dòng)態(tài)，通過(guò)日志能很清晰的分析出來(lái)。看看有多少304，多少404，看看哪些頁(yè)面被過(guò)渡抓取，哪些始終沒(méi)有被爬行，每個(gè)頁(yè)面的平均抓取時(shí)間，蜘蛛每次訪問(wèn)網(wǎng)站的抓取深度，蜘蛛每天到訪網(wǎng)站的次數(shù)等等，這些都能直接反應(yīng)網(wǎng)站目前的問(wèn)題。

　　訪問(wèn)次數(shù)側(cè)面反應(yīng)權(quán)重

　　蜘蛛訪問(wèn)網(wǎng)站的次數(shù)能側(cè)面反應(yīng)出網(wǎng)站自身的權(quán)重，一般小網(wǎng)站單個(gè)蜘蛛每天來(lái)訪的次數(shù)大概在幾十次。如果高于幾十次，那么說(shuō)明通過(guò)鏈接爬行到網(wǎng)站上的次數(shù)較多，那么抓取收錄的機(jī)會(huì)就會(huì)大一些，最終對(duì)排名也是有積極的影響。如果每天來(lái)訪一兩次甚至零次，那么網(wǎng)站非常危險(xiǎn)。

　　404頁(yè)面降低整體權(quán)重

　　每個(gè)網(wǎng)站或多或少的都有404錯(cuò)誤頁(yè)面，這是不可避免的現(xiàn)象。有時(shí)候是空間上本身問(wèn)題，有時(shí)候是自身網(wǎng)站的設(shè)置問(wèn)題，有時(shí)候是外部網(wǎng)站存在外部鏈接的問(wèn)題，從日志中一旦發(fā)現(xiàn)，就應(yīng)該立刻調(diào)整。如果是抓取某個(gè)URL404特別多的話，需要在網(wǎng)站上建立這樣一個(gè)URL頁(yè)面，有效的利用，也可以修改robots文件給予屏蔽，禁止抓取。大量的404錯(cuò)誤會(huì)被蜘蛛記錄下來(lái)，對(duì)網(wǎng)站是減分印象，所以會(huì)從整體上降低網(wǎng)站的權(quán)重。

　　根據(jù)抓取排行做調(diào)整

　　在很多網(wǎng)站日志中，都能清晰的看到頁(yè)面的抓取排行，URL的抓取排行，這些排行最能直接的反應(yīng)網(wǎng)站的那些部分是最受蜘蛛歡迎的。如果出現(xiàn)了很多css或js的文件都被大量的訪問(wèn)，那么頁(yè)面中這樣的鏈接就大大浪費(fèi)了權(quán)重，所以需要修改robots文件給予禁止。查看有些網(wǎng)站的日志，能明顯的看到那些被過(guò)渡抓取，那些重點(diǎn)內(nèi)容抓取的較少，這樣觀察之后就能做到心中有數(shù)，可以有的放矢。比如之前我的網(wǎng)站會(huì)莫名奇妙的多出一些抓取文件夾，而這些文件夾在網(wǎng)站中是并不存在的，所以要及時(shí)發(fā)現(xiàn)，并給予屏蔽。

　　另外，也偶爾也會(huì)出現(xiàn)一些500、206等狀態(tài)碼，這些都是日常的一些小問(wèn)題引起的，不必過(guò)于擔(dān)心。而如果大量集中的出現(xiàn)就說(shuō)明服務(wù)器本身有問(wèn)題，另外在根目錄中盡量不要放置壓縮文件，這樣會(huì)被一些別有用心的人嘗試下載網(wǎng)站的源碼或者備份的數(shù)據(jù)。還有助于304狀態(tài)碼，這個(gè)說(shuō)明也正常，是網(wǎng)站沒(méi)有更新造成的。

　　定期查看網(wǎng)站的日志其實(shí)并不會(huì)占用我們太多的時(shí)間，但如果一直不查看，網(wǎng)站就會(huì)有很多的小問(wèn)題我們無(wú)從知曉，或許友情連接我們做了，原創(chuàng)內(nèi)容也更新了，外部鏈接也不停在發(fā)，但是排名卻一直非常緩慢，那么這個(gè)時(shí)候就不妨看看你的日志，說(shuō)不定問(wèn)題就出在這里邊。

　　本文就到這里吧，膜法世家http://1908.sfwhy.com供稿，A5首發(fā)，轉(zhuǎn)載請(qǐng)尊重作者勞動(dòng)成果，謝謝!