說起蜘蛛,大家可能就會想到,會織網的讓人恐怖的八條腿蜘蛛,這里我介紹的是網路蜘蛛。網路蜘蛛它有自己的個性和評判標準。為了提高網絡排名,我們的網站對它都是敞開大門等著盼著要見它,它可不是誰家都肯隨便光顧的,這要看你的網站合不合他的口味。
說白了網絡蜘蛛就是一個程序,對于網絡蜘蛛的程序來說是有它的特點的,我們應該根據它的特點去研究怎樣去建設推廣網站,怎樣迎合他的口味把它吸引過來,所以你的網站建設推廣方法要符合蜘蛛的口味,給它喜歡的網絡食物它才會一一收集帶走,送 到大本營(數據庫)去儲備。你的信息才能從大本營中搜索出來。在建設天下藏品網www.txsc100.com 時我從中悟到了幾點網絡蜘蛛的爬行特性,下面我就給大家介紹一下怎樣才能應對好這只網絡蜘蛛。

蜘蛛口味一,不喜歡深潛
據統計數據來看,容量最大的搜索引擎數據庫也只是抓取了整個互聯網網頁的百分之四十左右,最大的原因就是為了避免數據數據量過大,影響搜索效率,所以,蜘蛛根據自己的“習性”只是抓取那些重要的網頁,它的評判依據就是網頁鏈接的深度,首先它會抓取初始網頁鏈接的所有網頁,然后再選擇其中一個鏈接網頁繼續抓取,當然它不會無休止的抓下去,它認為淺度鏈接才是優質的網頁,這也符合我們考慮問題的習慣,總把重要的東西擺在最前面。
蜘蛛的心聲,在建設網站或者選擇網絡模板是時,要做淺度鏈接,不要做深度鏈接,蜘蛛不喜歡潛的太深。
蜘蛛口味二,喜靜不喜動
動態網站是由程序生成的頁面,維護比較簡單,不需要專業人員去操作,而且交互性比較強,這也是動態網站不斷增多的原因。但是這會給蜘蛛的抓取帶來一些麻煩,相對于動態而言,由于靜態網頁沒有數據庫,的蜘蛛會直接在頁面抓取信息,它比較難于處理的是一些腳本語言生成的動態網頁。尤其是銷售性質的一些網站,產品上傳要不斷的生成新的頁面。網站的發展趨勢和蜘蛛的喜好產生了很大矛盾。
蜘蛛的心聲,在建站時針對網站的特點,重要的內容和固定的信息做成靜態網頁,如公司簡介,聯系我們。對于時常需要發布商品信息,網站內容不斷更新的網頁,我們可以通過相應的技術不定期的轉化成偽靜態網頁。
蜘蛛口味三,取重棄輕,喜新厭舊
蜘蛛在更新收納的網站數據時,不是把整個網站的網頁從新抓取一遍,而是判斷網站的更新日期,拿來同上次抓取的進行對比,如果日期沒有更新,那么它是不會去理會的。
前面提到了,蜘蛛喜歡淺度爬行,那么對于權重,和PR值不同的網站她來的頻率和爬行深淺度是不一樣的,這有它自己的計算方式。權重高的網站可能幾小時甚至幾分鐘就爬行一次,權重低的幾天甚至半月也不光顧一回。對于爬行深度,比如你的網站權重是2,那么它的爬行深度就只到第一層或者第二層鏈接,對于第三層,第四層它也是不去理會的。
蜘蛛的心聲,要不斷的更新網站內容,讓蜘蛛帶走更多的新鮮數據到數據庫。要想蜘蛛爬的更深那就要辛勤耕作,想盡一切辦法提高網站權重,和PR值,讓蜘蛛來的更勤,這樣達到一個良性循環網站排名自然會不斷上升。此文章來自天下藏品網www.txsc100.com 原創,首發A5轉載請注明出處及鏈接,文責自負,尊重原創,謝謝合作!
推薦閱讀
大家好,我是木子成舟。對于SEO我們每天都會有站長分享自己的技術,其實技術這一塊,認真的花個幾個月研究下就都能摸透,很多人可能就會覺得SEO技術很簡單,其實不是的。說簡單其實SEO真的能夠很簡單,因為SEO就是每>>>詳細閱讀
本文標題:淺談搜索引擎蜘蛛的口味
地址:http://www.geekbao.cn/a/34/20120209/29197.html