我們?cè)趦?yōu)化的過(guò)程中會(huì)發(fā)現(xiàn)自己的一些網(wǎng)站為什么收錄那么慢，文章質(zhì)量以及一些優(yōu)化都是設(shè)置比較完善的，為什么收錄效果還是....，這就是關(guān)于到自己URL的深度，也就是文章與首頁(yè)的距離是都太深，導(dǎo)致蜘蛛抓取困難，也有這一部分的原因。

　　為什么文章的位置不能太遠(yuǎn)，URL深度如何影響文章收錄效果?

　　對(duì)于蜘蛛來(lái)說(shuō)：廣度優(yōu)先遍歷是爬蟲(chóng)中使用最廣泛的一種爬蟲(chóng)策略，之所以使用廣度優(yōu)先搜索策略，主要原因有三點(diǎn)：

　　1、重要的網(wǎng)頁(yè)往往離種子比較近，例如我們打開(kāi)新聞網(wǎng)站的時(shí)候往往是最熱門的新聞，隨著不斷的深入沖浪，所看到的網(wǎng)頁(yè)的重要性越來(lái)越低。

　　2、萬(wàn)維網(wǎng)的實(shí)際深度最多能達(dá)到17層，但到達(dá)某個(gè)網(wǎng)頁(yè)總存在一條很短的路徑。而廣度優(yōu)先遍歷會(huì)以最快的速度到達(dá)這個(gè)網(wǎng)頁(yè)。

　　3、廣度優(yōu)先有利于多爬蟲(chóng)的合作抓取，多爬蟲(chóng)合作通常先抓取站內(nèi)鏈接，抓取的封閉性很強(qiáng)。
 

　　URL不同層級(jí)的優(yōu)化效果是不一樣的。

　　1、URL級(jí)別是兩層：

　　通常，網(wǎng)站的URL深度使得將網(wǎng)站的權(quán)重直接發(fā)送到相應(yīng)頁(yè)面是有效的。對(duì)于這種效果，每個(gè)頁(yè)面的URL權(quán)重相對(duì)較高，并且排名相應(yīng)地更好。但是，為了優(yōu)化，這種層次結(jié)構(gòu)不利于用戶體驗(yàn);

　　2、URL級(jí)別是三層：

　　這樣的URL級(jí)別是最常見(jiàn)的，一般是第一頁(yè)、列頁(yè)面的、內(nèi)容頁(yè)面，對(duì)于每個(gè)頁(yè)面都可以有效地區(qū)分優(yōu)化網(wǎng)站，層次結(jié)構(gòu)清晰，并且URL的權(quán)重很好轉(zhuǎn)移，所以第三層URL的深度是一個(gè)非常常見(jiàn)的點(diǎn)，一般用于博客、企業(yè)站點(diǎn)的方向;

　　3、URL級(jí)別超過(guò)四層：

　　這樣的URL深度站點(diǎn)一般是大型網(wǎng)站，生產(chǎn)難度也比較高，所以站點(diǎn)內(nèi)容也是相對(duì)的。網(wǎng)站的URL越深，越多的蜘蛛爬行層次結(jié)構(gòu)，因此適用的網(wǎng)站類型是，大型新聞源平臺(tái)、論壇交換平臺(tái)、大型技術(shù)類網(wǎng)站、電子商務(wù)平臺(tái)等;這些是深度為4或以上的網(wǎng)站，優(yōu)點(diǎn)是可以分離的內(nèi)容非常薄，這有利于用戶體驗(yàn)。每列分為不同的小列。在劃分每個(gè)內(nèi)容方面，用戶可以找到他們需要的內(nèi)容和產(chǎn)品;

　　所以通過(guò)以上的兩種方法的分析，是不是知道了為什么URL的深度是影響文章的收錄效果，并且對(duì)于優(yōu)化效果是有一定的影響的，對(duì)于企業(yè)站的文章，我們通常把他放置在第三層就是比較可以的，蜘蛛好抓取，權(quán)重更容易傳遞，有利于排名的提升。