廣度爬行和深度爬行
廣度優(yōu)先：一般來說比較多在用在新站上面。蜘蛛根據網站的層次目錄結構，爬行，先訪問第一層 目錄的頁面，爬行完畢之后在爬行第二層的頁面依此類推。但是這樣爬行來說很多時候蜘蛛只在第一層目 錄或者前幾層目錄爬完就走了。這樣被收錄的頁面和網站本身的頁面比例來說不是很大。是以站長要解決 這個問題一般來說要從兩個方面入手，一個是增加網站權重，爭取蜘蛛在廣度爬行的時候也進行深度爬行 。另外是，減少目錄層次，一般來說現在的開源程序和網站程序的架構也都比較好，我們建立一級欄目和 二級欄目就足夠。整體的目錄層次不要超過三層。這樣利于蜘蛛的收錄和爬行。如果網站權重不夠，而發(fā) 布的內容又再較深的目錄層次，應該讓其在首頁顯示，蜘蛛來的時候可以第一時間爬行。現在各大搜索引 擎根據網站的權重大小一般都回采用廣度爬行和深度爬行同時進行。
文章由佛山網站建設m.cablesmakingmachine.com整理提供
|
新聞資訊
