吸引搜索引擎“蜘蛛”收錄內(nèi)容的方法

在規(guī)劃好網(wǎng)站的內(nèi)容策略以后，下面應(yīng)該考慮的是如何設(shè)計網(wǎng)站內(nèi)容的更新節(jié)奏，讓搜索引擎更好地抓取、收錄網(wǎng)站內(nèi)容，進而更好地促進網(wǎng)站關(guān)鍵詞的排名和高質(zhì)量流量的穩(wěn)步提升。

搜索引擎“蜘蛛”對網(wǎng)頁進行爬取，然后抓取這些內(nèi)容并存入自己龐大的數(shù)據(jù)庫中（收錄），再經(jīng)過一系列處理，最后當(dāng)用戶搜索某個關(guān)鍵詞時返回與之相對應(yīng)的結(jié)果。從這個角度而言，保證蜘蛛抓取網(wǎng)頁是重要的環(huán)節(jié)。對搜索引擎優(yōu)化來說，如何讓搜索引擎第一時間發(fā)現(xiàn)網(wǎng)站上的最新信息并收錄就是很重要的一個方面。

蜘蛛的特性與收錄

搜索引擎蜘蛛（spider）是一個很形象的名字（也稱為機器人bot），它把互聯(lián)網(wǎng)比喻成一個蜘蛛網(wǎng)，spider就是在網(wǎng)上爬來爬去的蜘蛛。蜘蛛通過網(wǎng)頁的鏈接地址來尋找網(wǎng)頁，網(wǎng)站某一個頁面（通常是首頁）開始，讀取網(wǎng)頁的內(nèi)容，找到網(wǎng)頁中的其他鏈接地址，然后通過這些鏈接地址尋找下一個網(wǎng)頁，這樣一直尋找下去，直到把這個網(wǎng)站所有的網(wǎng)頁都抓取完為止。如果把整個互聯(lián)網(wǎng)當(dāng)成一個網(wǎng)站，那么網(wǎng)絡(luò)蜘蛛就可以用這個原理把互聯(lián)網(wǎng)上所有的網(wǎng)頁都抓取下來。

在通常情況下，蜘蛛完成某個網(wǎng)站的全部內(nèi)容抓取以后，會隔一段時間又來看一下網(wǎng)站頁面是否更新、是否有新產(chǎn)生的內(nèi)容需要抓取，并根據(jù)網(wǎng)站的更新效率等因素逐漸養(yǎng)成爬行此網(wǎng)站的節(jié)奏。

通常的說法是：蜘蛛的爬行特性是根據(jù)網(wǎng)站的更新節(jié)奏而來的，如果網(wǎng)站更新得越頻繁，新內(nèi)容越多，蜘蛛就會爬行得越快，隨之而來的收錄也就越快。所以，搜索引擎優(yōu)化來說，要獲得好的排名的基礎(chǔ)，就是保證網(wǎng)頁的收錄，保證蜘蛛對網(wǎng)站有良好的爬行節(jié)奏。

穩(wěn)定的更新節(jié)奏與“圈養(yǎng)”蜘蛛

在站長圈子中曾經(jīng)有一種玩笑說法，叫做“圈養(yǎng)”蜘蛛，大概意思就是讓蜘蛛保持對當(dāng)前網(wǎng)站的熱衷，提高爬行效率，增加網(wǎng)站內(nèi)容收錄的速度。這種說法雖然玩笑成分居多，但是從搜索引擎優(yōu)化的角度而言，卻是有一定道理的。

簡單來說，要達到“圈養(yǎng)”蜘蛛的目的需要兩個條件：

①有足夠多的新內(nèi)容

②這些新內(nèi)容有良好的更新節(jié)奏。

如果一個網(wǎng)站沒有足夠多的新內(nèi)容，蜘蛛在爬行完成以后就會變得比較懶，來訪問網(wǎng)站的節(jié)奏會逐漸延長，及時收錄新頁面的機會也就降低了。如果網(wǎng)站采用一次更新大量內(nèi)容，然后長時間不更新的方式來建設(shè)內(nèi)容，蜘蛛對新頁面的抓取效率同樣也不會高。

基于上面的原因，對中小型網(wǎng)站而言就需要養(yǎng)成頻繁更新、穩(wěn)定更新優(yōu)質(zhì)內(nèi)容的節(jié)奏。要實現(xiàn)這樣的效果，在解決了內(nèi)容儲備之后，如果有一個可以按照固定節(jié)奏，代替人工更新的插件就好了。

中小型網(wǎng)站站長的福音：自動審核、自動更新的神奇插件

在當(dāng)前的主流CMS系統(tǒng)中，具有自動審核文章、自動更新頁面功能的系統(tǒng)還不多，不過一些有豐富的搜索引擎優(yōu)化經(jīng)驗的站長已經(jīng)嘗試開發(fā)出了這樣的插件，可以解放雙手。

以織夢為例，“自動審核、自動更新”插件是開源的，任何站長都可以采用。這個插件的基本功能是實現(xiàn)對后臺未審核內(nèi)容按設(shè)置頻率進行審核，然后在審核的同時更新頁面。

這個插件是開源免費的，設(shè)置步驟不難，但是涉及文件比較多，這里無法詳細介紹。相關(guān)插件下載和詳細設(shè)置方法可以到百度上進行搜索。

部署完這個插件以后，登陸織夢后臺，在“核心”模塊下有一項“定時審核管理”，如圖所示：


選擇此項以后，搜索引擎優(yōu)化者可以按照每天24小時的方式，定義是否審核后臺未審核文章以及審核幾篇，如圖所示:


在通常情況下，要實現(xiàn)“圈養(yǎng)”蜘蛛的目的，在內(nèi)容儲備足夠時，搜索引擎優(yōu)化者可以設(shè)置每個小時審核數(shù)篇文章，并自動在審核文章以后更新網(wǎng)站的首頁、欄目頁和內(nèi)容頁。

設(shè)置好以后，當(dāng)網(wǎng)站“未審核文章”中有文章時，網(wǎng)站只要有訪問者，均可按設(shè)定的條件觸發(fā)自動審核、自動更新功能。

“未審核文章”就是網(wǎng)站建設(shè)者已經(jīng)發(fā)布到網(wǎng)站數(shù)據(jù)庫中，但是沒有設(shè)置開放瀏覽的文章，這樣的文章是無法被來訪者看到的，只有通過審核之后才會顯示在網(wǎng)站頁面中供來訪者瀏覽。

通過部署這個功能，搜索引擎優(yōu)化者可以根據(jù)網(wǎng)站規(guī)模，實現(xiàn)每個星期或每個月批量發(fā)布文章，然后讓插件實現(xiàn)每天更新幾篇、幾十篇的功能，對新頁面的收錄非常有幫助。

上述插件和功能比較適合中小型網(wǎng)站采用，特別是在負責(zé)編寫文章的人不多的情況下；對大型站點來說，有足夠的采編隊伍，那就沒有必要采用這個方法了。