蜘蛛的爬行、頁(yè)面的收錄及排序都是自動(dòng)處理。網(wǎng)站目錄則是一套人工編輯的分類目錄，鹿泉有實(shí)力網(wǎng)站建設(shè)由編輯人員人工創(chuàng)建多個(gè)層次的分類，站長(zhǎng)可以在不同分類里提交網(wǎng)站，目錄編輯在后臺(tái)審核所提交的網(wǎng)站，將網(wǎng)站放置于相應(yīng)的分類頁(yè)面。有的時(shí)候編輯也主動(dòng)收錄網(wǎng)站。網(wǎng)站建設(shè)多少錢典型的網(wǎng)站目錄包括雅虎目錄、開(kāi)放目錄、好123等。目錄并不是本書中所討論的SEO所關(guān)注的真正的搜索引擎。雖然網(wǎng)站目錄也常有一個(gè)搜索框，但目錄的數(shù)據(jù)來(lái)源是人工編輯得到的。

有實(shí)力網(wǎng)站建設(shè)只有在深入了解搜索引擎蜘蛛爬行原理的基礎(chǔ)上，才能盡量使蜘蛛抓得快而全面。上面所舉的幾個(gè)例子，讀者看完搜索引擎原理簡(jiǎn)介這一節(jié)后，會(huì)有更深入的認(rèn)識(shí)。搜索引擎與目錄，網(wǎng)站建設(shè)多少錢早期的網(wǎng)站優(yōu)化資料經(jīng)常把真正的搜索引擎與目錄放在一起討論，甚至把目錄也稱為搜索引擎的一種，這種講法并不準(zhǔn)確。真正的搜索引擎指的是由蜘蛛程序沿著鏈接爬行和抓取網(wǎng)上的大量頁(yè)面，存進(jìn)數(shù)據(jù)庫(kù)，經(jīng)過(guò)預(yù)處理，用戶在搜索框輸入關(guān)鍵詞后，搜索引擎排序程序從數(shù)據(jù)庫(kù)中挑選出符合搜索關(guān)鍵詞要求的頁(yè)面。

相信很多讀者也有這種經(jīng)歷：線上研究對(duì)比，線下購(gòu)買。因此，就算是Z傳統(tǒng)的線下生意，無(wú)法線上銷售，能被用戶在搜索引擎找到，也至關(guān)重要。有實(shí)力網(wǎng)站建設(shè)搜索引擎簡(jiǎn)史搜索引擎占網(wǎng)絡(luò)廣告市場(chǎng)比例，隨著互聯(lián)網(wǎng)的發(fā)展，搜索引擎的出現(xiàn)是必然的。就像傳統(tǒng)圖書館一樣，收藏的書籍、文件多了，必然出現(xiàn)管理、查找困難，索引和搜索就成為必需的了。實(shí)際上，網(wǎng)站建設(shè)多少錢搜索引擎原理在很大程度上源于傳統(tǒng)文件檢索技術(shù)。網(wǎng)上資源數(shù)量遠(yuǎn)超出我們個(gè)人所能想象與掌控，沒(méi)有搜索引擎，我們幾乎無(wú)法有效利用這些資源，也就沒(méi)有互聯(lián)網(wǎng)的今天。

用戶搜索“歷史”、“分類”這些關(guān)鍵詞時(shí)僅僅因?yàn)轫?yè)面上有這些詞出現(xiàn)而返回博客帖子是毫無(wú)意義的，完全不相關(guān)。有實(shí)力網(wǎng)站建設(shè)所以這些區(qū)塊都屬于噪聲，對(duì)頁(yè)面主題只能起到分散作用。搜索引擎需要識(shí)別并消除這些噪聲，排名時(shí)不使用噪聲內(nèi)容。網(wǎng)站建設(shè)多少錢消噪的基本方法是根據(jù)HTML標(biāo)簽對(duì)頁(yè)面分塊，區(qū)分出頁(yè)頭、導(dǎo)航、正文、頁(yè)腳、廣告等區(qū)域，在網(wǎng)站上大量重復(fù)出現(xiàn)的區(qū)塊往往屬于噪聲。對(duì)頁(yè)面進(jìn)行消噪后，剩下的才是頁(yè)面主體內(nèi)容。

有實(shí)力網(wǎng)站建設(shè)如果每次搜索都重新處理排名可以說(shuō)是很大的浪費(fèi)。搜索引擎會(huì)把Z常見(jiàn)的搜索詞存入緩存，用戶搜索時(shí)直接從緩存中調(diào)用，而不必經(jīng)過(guò)文件匹配和相關(guān)性計(jì)算，大大提高了排名效率，縮短了搜索反應(yīng)時(shí)間。網(wǎng)站建設(shè)多少錢查詢及點(diǎn)擊日志 搜索用戶的IP地址、搜索的關(guān)鍵詞、搜索時(shí)間，以及點(diǎn)擊了哪些結(jié)果頁(yè)面，搜索引擎都記錄形成日志。這些日志文件中的數(shù)據(jù)對(duì)搜索引擎判斷搜索結(jié)果質(zhì)量、調(diào)整搜索算法、預(yù)期搜索趨勢(shì)等都有重要意義。

有實(shí)力網(wǎng)站建設(shè)這種快速收錄和更新也只能局限于高權(quán)重網(wǎng)站。很多頁(yè)面幾個(gè)月不被重新抓取和更新，也是非常常見(jiàn)的。網(wǎng)站建設(shè)多少錢要返回Z好的結(jié)果，搜索引擎也必須抓取盡量全面的頁(yè)面，這就需要解決很多技術(shù)問(wèn)題。一些網(wǎng)站并不利于搜索引擎蜘蛛爬行和抓取，諸如網(wǎng)站鏈接結(jié)構(gòu)的缺陷、大量使用Flash、JavaScript腳本，或者把內(nèi)容放在用戶必須登錄以后才能訪問(wèn)的部分，都培大了搜索引擎抓取內(nèi)容的難度。