如果搜索引擎不能正確訪問(wèn)你的內(nèi)容，那么你為建立網(wǎng)站所做的一切努力將毫無(wú)意義。確保這種情況不會(huì)發(fā)生的一個(gè)重要方法是有一個(gè)適合搜索的網(wǎng)站架構(gòu)。
要理解這個(gè)問(wèn)題，你需要知道搜索引擎如何建立一個(gè)索引，從這個(gè)索引中導(dǎo)出顯示在其結(jié)果頁(yè)面上的網(wǎng)站列表。谷歌和其他搜索引擎沒有一個(gè)團(tuán)隊(duì)來(lái)歸檔網(wǎng)站上的每一頁(yè)。它依賴于一個(gè)名為“蜘蛛”的程序——一個(gè)在鏈接之間移動(dòng)并將信息存儲(chǔ)在數(shù)據(jù)庫(kù)站點(diǎn)代碼中的自動(dòng)機(jī)器人。
確保這些蜘蛛可以訪問(wèn)您網(wǎng)站上的所有內(nèi)容對(duì)于SEO非常重要。不幸的是，許多網(wǎng)站架構(gòu)錯(cuò)誤可能會(huì)使搜索引擎的蜘蛛程序無(wú)法訪問(wèn)您的大部分網(wǎng)站。
這里有一些網(wǎng)站中最常見的錯(cuò)誤以及如何避免它們的技巧。
1.過(guò)度使用圖像或腳本文件的內(nèi)容。
因?yàn)樗麄儾皇腔钪秃粑娜祟愖x者，搜索引擎蜘蛛只能閱讀呈現(xiàn)給他們的基于文本的內(nèi)容。如果您將信息存儲(chǔ)在圖像文件、Flash動(dòng)畫或Javascript代碼中，如網(wǎng)站的標(biāo)題圖片或介紹性視頻，蜘蛛可能無(wú)法正確處理內(nèi)容。

解決方案是使用文本版本來(lái)復(fù)制以這些替代格式存儲(chǔ)的信息。嘗試使用Webconf的搜索引擎SpiderSimulator等工具，觀察蜘蛛到達(dá)你的網(wǎng)站時(shí)看到了什么。如果您發(fā)現(xiàn)有大量?jī)?nèi)容缺失，請(qǐng)?jiān)陧?yè)面的其他地方以文本形式提供排除的信息，或者使用您網(wǎng)站的robot.txt文件——提供給您網(wǎng)站的搜索引擎的描述——將蜘蛛重定向到您創(chuàng)建的專門設(shè)計(jì)的基于文本的頁(yè)面，并向他們提供相同的信息。
2.深航淺航。
當(dāng)網(wǎng)站的導(dǎo)航變得太深，很多初級(jí)站長(zhǎng)都會(huì)陷入困境。因?yàn)樗阉饕嬷┲胪ㄟ^(guò)你創(chuàng)建的鏈接在你網(wǎng)站的頁(yè)面之間移動(dòng)，所以盡可能簡(jiǎn)化這種移動(dòng)是很重要的。如果您的導(dǎo)航結(jié)構(gòu)很深，這意味著某些頁(yè)面只能在長(zhǎng)時(shí)間連續(xù)單擊后才能訪問(wèn)，您將面臨蜘蛛無(wú)法深入您的網(wǎng)站以正確索引所有頁(yè)面的風(fēng)險(xiǎn)。
解決辦法是實(shí)現(xiàn)一個(gè)“淺”的導(dǎo)航結(jié)構(gòu)，訪問(wèn)者和搜索引擎蜘蛛只需點(diǎn)擊兩到三次就可以訪問(wèn)你網(wǎng)站的每一頁(yè)。您可以通過(guò)將導(dǎo)航結(jié)構(gòu)分解為子類別或合并其他內(nèi)部鏈接來(lái)完成此任務(wù)。
3.不一致的鏈接做法。
在構(gòu)建這些鏈接時(shí)，需要注意如何命名。第三，因?yàn)樗阉饕娌荒芾萌祟惖呐袛鄟?lái)看出你的意圖，他們的蜘蛛程序可能會(huì)將網(wǎng)址“www.yoursite.com/page1.html”和“yoursite.com/page1.html”索引成兩個(gè)單獨(dú)的頁(yè)面——即使兩個(gè)鏈接都將訪問(wèn)者引向同一個(gè)地方。
為防止這些索引錯(cuò)誤，請(qǐng)確保鏈接的構(gòu)建和命名方式一致。如果你過(guò)去犯了這個(gè)錯(cuò)誤，請(qǐng)使用301重定向讓搜索引擎蜘蛛知道你網(wǎng)站的“www”和“非www”版本是一樣的。
4.重定向不正確。
說(shuō)到301重定向，每當(dāng)你在一個(gè)網(wǎng)站上移動(dòng)頁(yè)面時(shí)——不管你是簡(jiǎn)單地重命名它們，還是把整個(gè)網(wǎng)站轉(zhuǎn)移到一個(gè)新的主機(jī)帳戶或網(wǎng)址——你都希望正確地重定向它們。如果不這樣做，將來(lái)可能會(huì)導(dǎo)致索引錯(cuò)誤，并消除您花時(shí)間獲得的反向鏈接的好處，因?yàn)檫@些鏈接不再指向有效的頁(yè)面。這兩個(gè)問(wèn)題都會(huì)降低你努力開發(fā)的搜索引擎結(jié)果的排名。我也想多了解一下網(wǎng)站，也可以看看《哪些工具有助于提高百度排名》。
由于這個(gè)主題可能是技術(shù)性的，不能用幾句話完全涵蓋，您可能需要找到在線資源進(jìn)行參考，例如SEOmoz的網(wǎng)站重定向指南。
5.最后包括站點(diǎn)地圖。
當(dāng)您提高網(wǎng)站架構(gòu)的可訪問(wèn)性時(shí)，請(qǐng)確保您已經(jīng)準(zhǔn)備好了站點(diǎn)地圖。該文件為蜘蛛提供了對(duì)站點(diǎn)上所有頁(yè)面的可訪問(wèn)引用，從而允許索引正確進(jìn)行。例如，這是omooo.com的站點(diǎn)地圖。
如果你的網(wǎng)站運(yùn)行在WordPress、Joomla、Drupal、Magento或者任何其他已經(jīng)建立的平臺(tái)上，你應(yīng)該可以安裝一個(gè)插件，可以自動(dòng)為你生成站點(diǎn)地圖頁(yè)面。如果沒有，創(chuàng)建一個(gè)站點(diǎn)地圖就像創(chuàng)建一個(gè)單獨(dú)的HTML頁(yè)面一樣簡(jiǎn)單，它包含所有其他頁(yè)面的鏈接，并將它們提交給搜索引擎進(jìn)行考慮。