2011-08-05
一個好的網站，不但要擁有好的排名，還要擁有足夠的收錄數量，不少站長朋友總是抱怨搜索引擎對自己網站的
收錄率不夠，有些站長朋友的網站收錄率甚至不到百分之四十，他們會迷惑，我的文章是原創的啊，為什么百度
不進行收錄呢?筆者通過分析網站日志，結果發現蜘蛛根本沒有爬到那些頁面，那么又如何會被收錄呢?站長朋
友們可能會問到為什么蜘蛛不爬行呢?筆者認為這主要和網站的結構設置有關，筆者在這里，通過分析搜索引擎
的頁面收錄原理來解析網站結構的優化。
站長朋友們都了解，搜索引擎蜘蛛程序通過域名進入網站，從而開展對頁面的抓取，蜘蛛從指定的頁面出發，沿
著頁面中的鏈接，按照某種特定的策略對網站中的頁面進行遍歷，收錄未訪問的網頁，然后搜索引擎再對網頁內
容進行判斷，決定是否收錄入數據庫。
目前，常見的搜索引擎收錄方式主要廣度優先，深度優化和用戶提交這幾種方式，這幾種方式的結合，從而讓搜
索引擎蜘蛛大化的能夠遍歷網站的所有頁面，從而加以收錄，但是如果網站的結構設置的不好，那么很容易導
致蜘蛛無法爬行到某些頁面，自然也無法收錄。事實上，網站結構在決定頁面權重方面起著非常關鍵的作用，直
接影響搜索引擎對頁面的收錄，一個設計合理的網站結構可以引導搜索引擎從中抓取到更多、更有價值的頁面。
那么，我們如何根據頁面的收錄原理來進行網站的優化工作呢?事實上，蜘蛛是通過連接不斷爬行，無論是采用
深度優先還是廣度優先，由于蜘蛛的能力有限，只能爬到一定的地方，這就要求我們盡量減少頁面的目錄深度及
與重要頁面之間的鏈接深度，從而有利于蜘蛛的爬行，具體分析如下：
第一：減少頁面之間的鏈接深度
減少頁面之間的鏈接深度包括減少普通頁面與重要頁面之間、重要頁面與重要頁面之間的鏈接深度，可以從以下
幾點入手：
1.為網站中相對重要的頁面增加更多的鏈接入口。在相對重要的頁面中存放更多鏈接指向其他的頁面，這樣不但
可以減少頁面之間的鏈接深度，還可以引導搜索引擎抓取網站中更多相對重要的頁面。舉個簡單的例子，我們網
站的首頁可以在合理的范圍內加上更多指向其他相對重要的頁面的鏈接。這樣有利于蜘蛛的爬行收錄。
2.如果我們要突出某個重要的頁面，可以在更多的頁面中加上鏈接指向這個頁面，就可以大化的保證這個重要
頁面的收錄和提高這個頁面的權重。
3.用心制作好網站地圖。網站地圖起到了減少頁面之間的鏈接深度，有利于蜘蛛查找到更多的頁面。
第二：減少頁面的目錄深度
減少頁面的目錄深度，實際上就是減少頁面URL的目錄層次，新手朋友可以從一下幾個方面入手：
1.對于全靜態頁面的網站，在規劃網站時要精簡目錄結構，我們在規劃目錄時，可以精簡為等。
2.對于動態頁面的網站，則可以通過 URL 重寫的方式減少頁面的 URL 的目錄層次。在實際操作中，我們會通過
URL重寫的方式使得網站中的每個頁面的URL深度都為1，即URL 形式為 http://域名/文件名稱。
第三：一個頁面的鏈接數量不要超過100
這是很多站長朋友所忽略的，事實上，如果一個頁面中的鏈接數量超過100，搜索引擎就可能拒絕索引該頁面，
或者忽略 100 以后的那部分鏈接指向的目標頁面。這是一個很關鍵的內容，很多站長朋友并沒有意識到這點，
所以很多時候超過100的那部分鏈接已經沒有意義，不被搜搜引擎蜘蛛所爬行，那么這部分的鏈接所指向的頁面
就不會被收錄，所以如果要想這部分鏈接所指向的頁面被收錄，我們要另外做鏈接導入。
下一條：北京網站建設中注意的問題
