蜘蛛，搜索引擎的爬取機器人，每天都會到處逛，這邊抓抓，那邊取取，肆無忌憚，不過就算這樣，我們也得把它當大爺看待，還得拼命的去討好他，因為它直接決定網站的收錄多少，直接決定網站的權重。以前我基本很少看網站日志的，太費神了，一大堆擠在一起的英文和數字，看得頭疼，直到有次做站，被降權后，為了討好蜘蛛，為了讓網站早日恢復，就強制著自己去砍，而且隨著SEO知識的不斷深入，發現網站日志實在好用，尤其是可以直觀的看到蜘蛛如何爬取網站，根據蜘蛛的爬取規律，來更新文章，大大的提高了網站的收錄。
很多SEOer都把蜘蛛比作一個人，有它自己的喜好，有它自己的原則，你配合它的工作，它會給你收錄足夠多的東西，來網站也勤快，你不配合它，那就等著被降權吧。下面我就說說蜘蛛的一些喜好和原則。
1、蜘蛛來爬取網站的時間一般都差不多，一般每天2次，當然一些大型網站都不一樣，我說的都是中小型網站，如果來了2次以上，說明你網站讓蜘蛛喜歡，如果沒有2次，抱歉，你該檢討下自己做站的方法了。根據蜘蛛來的時間，我們可以制定出網站更新內容的時間，在蜘蛛來之前，把內容更新好，對收錄有很大的提升。即使A5這樣的大站也不例外，他們審核通過的軟文不會立刻就放出來，而是統一在三個時間段來放，估計也是這個原因。
2、蜘蛛和人一樣，在第一次來的時候，就會給蜘蛛留下比較深的印象，它會記著你網站是做什么的，記著你網站的標題，記著你的排版，如果你的這些做的讓蜘蛛看不下去，那么你網站的首頁收錄時間可能要比平常人多1-2周，甚至更久，而且當它已經記下這些的時候，你不能隨意更改，改動大了，結局你懂的，要改最好在蜘蛛沒來過你網站之前就改好。
3、蜘蛛決定著網站的快照，在網站的不斷爬取中不斷的帶走東西，說明網站的內容質量好，它以后就來的越勤快，那么網站的快照肯定也會更好，形成一個良好的循環，這也是成就高權重網站的一個基本要求。
4、隨著搜索引擎的不斷發展，就會淘汰舊信息，留下最新的信息，這也造就了蜘蛛的喜新厭舊，對于新鮮信息，總會樂此不疲的去抓取，如果你每天都給它喂食新鮮的信息，那么它就會爬的越歡，它越歡就不愁網站沒發展了，所以原創很重要，是必須的，雖然原創很困難，尤其是每天原創，想想就讓人頭疼，但是為了收錄，為了網站，我們必須這么做，A5為什么發展的一直那么好，就是因為其每天都有無數人為其提供高質量的原創軟文，蜘蛛幾乎就呆那不走了。
5、人越多的地方，蜘蛛也越喜歡去，眾人喜歡的地方，必有其可愛之處，這也造就了那么多高權重論壇的權重越來越高，尤其是一些視頻網站，優酷、土豆、搜狐什么的，權重都滿10了，就是由于每天點擊觀看的人數超多，點擊量大和跳出率都很低的網站權重都很高。
6、蜘蛛最煩的應該就是那些服務器不穩定的網站，網站不穩定會導致蜘蛛在網站里面爬取的時候撞得頭暈眼花，無法正常的去爬取內容，火大的時候，甚至直接回家，毛都不帶走，可能回去就要告你狀，降你權。
7、蜘蛛也會被人影響，人多的它喜歡，別人喜歡、推崇的它也會喜歡，就如友情鏈接，就比如書簽。
8、還有很多蜘蛛都不喜歡的，像網站層次很多的、動態URL的、有大量JS代碼的、有FLASH的、有跳轉的、要登錄才能瀏覽的，像這些類型的網站，蜘蛛不是看不懂，就是不認識，他就不抓取。
研究好蜘蛛的一些特性，觀察好它的動向對網站絕對有意想不到的收獲，大家以后都要多看看日志，也對網站的一些規律、特性、缺點有更深的認識。本文由大連廣告公司發布在http://www.dalianguanggao.com.cn，轉載請保留連接，給我動力，我也將給大家分享更多的東西!
推薦閱讀
搜索引擎越來越重視用戶體驗已經是個趨勢，但是這并不能否定鏈接和原創內容的重要性。內容是網站的靈魂，也是搜索引擎賴存在的基礎，因為沒有足夠數量的內容，搜索引擎就失去了存在的價值。同樣的，鏈接在網站及搜索>>>詳細閱讀
本文標題：分析好蜘蛛的脾氣和原則引領網站收錄
地址：http://www.geekbao.cn/a/34/20120215/31169.html
網友點評
精彩導讀
科技快報
品牌展示