對于蜘蛛而言，網(wǎng)站地圖是搜索引擎全面認識網(wǎng)站制作的好工具。網(wǎng)站地圖就像花名冊，好的網(wǎng)站地圖能讓蜘蛛很有指向性的訪問網(wǎng)站中的任何頁面。所以，制作網(wǎng)站地圖時就需要謹慎行事了

這么做的主要目的就是為了分析蜘蛛爬行網(wǎng)站的情況，許多站長都有檢查網(wǎng)站日志的習(xí)慣。當然其中多數(shù)站長也只是簡單的解一下當天蜘蛛爬行的次數(shù)，這一點就足夠發(fā)現(xiàn)問題了有時候，會覺得自己的網(wǎng)站已經(jīng)相當完美了而正常優(yōu)化過程中，蜘蛛?yún)s對此不感冒，讓人很是著急。

搜索引擎借助蜘蛛在互聯(lián)網(wǎng)這張大網(wǎng)中搜尋“獵物”唯一所能依據(jù)的線索就是鏈接了找到新的鏈接后，解原理就很容易理解。根據(jù)復(fù)雜的算法最終對網(wǎng)站進行排名，貯存在數(shù)據(jù)庫中。很多網(wǎng)站可能會因為網(wǎng)站結(jié)構(gòu)混亂失去蜘蛛到訪的機會，然而蜘蛛不訪問網(wǎng)站的因素有很多，下面我一起總結(jié)一下：

圖片、flash等內(nèi)容過多

搜索引擎發(fā)展到現(xiàn)在已經(jīng)比擬的智能化了去年googl就推出了圖片搜索功能，不得不說。能夠分析圖片的色彩、像素比例而找到圖片的出處。然而這項技術(shù)對于搜索引擎完全的識別圖片中的信息還有不小的差異，而很多站長或是不懂得搜索引擎優(yōu)化，或是考慮網(wǎng)站美觀和內(nèi)容豐富，往往會在頁面中嵌入大量高清圖片、flash即使你網(wǎng)站內(nèi)容再好，蜘蛛也無法知道，只能繞道而行了現(xiàn)在網(wǎng)絡(luò)上有許多模擬蜘蛛抓取的工具，有類似情況的網(wǎng)站站長可以查詢一下自己網(wǎng)站的信息，看看蜘蛛能夠發(fā)現(xiàn)的信息和人眼看到有多大差距。

網(wǎng)站死鏈接過多

蜘蛛興高采烈的來到網(wǎng)站，可以想象。開始逐個鏈接的搜尋，以為發(fā)現(xiàn)了一堆好的內(nèi)容，然而卻是一堆打不開的鏈接等著她一次、兩次、三次，每次來都是這種情況，所以她生氣了就再也不會訪問你頁面了大部分的網(wǎng)站都存在死鏈接，只要我能夠及時的發(fā)現(xiàn)并清除掉就沒有問題了可以利用強大的xenu也可以查看你網(wǎng)站日志，發(fā)現(xiàn)返回404狀態(tài)碼的一律清除。

外鏈與nofollow

因為其他網(wǎng)站上存在網(wǎng)站的鏈接。想要蜘蛛更頻繁的光臨，之所以蜘蛛能夠成功的找到并訪問你站點。建立外鏈時就應(yīng)該考慮外鏈網(wǎng)站權(quán)重，收錄數(shù)越大、PR值越高，快照更新越快的網(wǎng)站權(quán)重就越高。另外有些無良站長在做友情鏈接時，會有意設(shè)置nofollow這樣的外鏈在蜘蛛眼里形同虛設(shè)，如果你網(wǎng)站的外鏈有這種現(xiàn)象，請及時撤除。

網(wǎng)站代碼復(fù)雜

代碼優(yōu)化非常重要，網(wǎng)站建設(shè)中。冗長代碼對網(wǎng)站無任何意義，而且還會影響打開速度和搜索引擎蜘蛛的判斷。

網(wǎng)站邏輯結(jié)構(gòu)復(fù)雜

也就是說，正確的網(wǎng)站邏輯結(jié)構(gòu)應(yīng)該是扁平狀的樹形結(jié)構(gòu)。蜘蛛通過首頁訪問，能夠達到任何一個欄目頁，通過欄目頁又能達到任何一個內(nèi)容頁，這個次數(shù)應(yīng)該被限定在3次以內(nèi)(較大的網(wǎng)站可以多幾層)如果網(wǎng)站層次太多，網(wǎng)站權(quán)重又不夠高，蜘蛛就沒有興趣去一層層的搜尋了。

本文發(fā)布于北京網(wǎng)站建設(shè)公司尚品中國http://www.5e3.com.cn/