上面介紹了(le)影(yǐng)響Baidu spider正常抓取的(de)原因，下(xià)面介紹Baidu spider的(de)一些判斷原則。在建庫環節前，Baidu spider會對(duì)頁面進行初步内容分(fēn)析和(hé)鏈接分(fēn)析，通(tōng)過内容分(fēn)析決定該網頁是否需要建索引庫，通(tōng)過鏈接分(fēn)析發現更多(duō)網頁，再對(duì)更多(duō)網頁進行抓取—一分(fēn)析是否建庫&發現新鏈接的(de)流程。理(lǐ)論上，Baidu spider會将新頁面上所有能“看到”的(de)鏈接都抓取回來(lái)。那麽，面對(duì)衆多(duō)新鏈接， Bartender根據以下(xià)兩個(gè)方面判斷哪個(gè)更重要。



(1)對(duì)用(yòng)戶的(de)價值
①内容獨特，百度搜索引擎喜歡 unigue的(de)内容。
②主體突出，切不要出現網站制作主體内容不突出而被搜索引擎誤判爲空短頁面不抓取的(de)情況。
③内容豐富。
④廣告适當。
 
(2)鏈接的(de)重要程度
①目錄層級——淺層優先。
②鏈接在站内的(de)受歡迎程度。