蜘蛛的爬行、頁面的收錄及排序都是自動處理。網(wǎng)站目錄則是一套人工編輯的分類目錄，無極正規(guī)網(wǎng)站建設(shè)由編輯人員人工創(chuàng)建多個層次的分類，站長可以在不同分類里提交網(wǎng)站，目錄編輯在后臺審核所提交的網(wǎng)站，將網(wǎng)站放置于相應(yīng)的分類頁面。有的時候編輯也主動收錄網(wǎng)站。網(wǎng)站建設(shè)哪家好典型的網(wǎng)站目錄包括雅虎目錄、開放目錄、好123等。目錄并不是本書中所討論的SEO所關(guān)注的真正的搜索引擎。雖然網(wǎng)站目錄也常有一個搜索框，但目錄的數(shù)據(jù)來源是人工編輯得到的。

無極正規(guī)網(wǎng)站建設(shè)查詢處理快速準(zhǔn)確，查詢是普通用戶唯一能看到的搜索引擎工作步驟。周戶在搜索框輸入關(guān)鍵詞，單擊“搜索”按鈕后，通常不到一秒鐘就會看到搜索結(jié)果。表面Z簡單的過程，實際上涉及非常復(fù)雜的后臺處理。網(wǎng)站建設(shè)哪家好在Z后的查詢階段，Z重要的難題是怎樣在不到一秒鐘的時間內(nèi)，快速從幾十萬、幾百萬，甚至幾千萬包含搜索詞的頁面中，找到Z合理、Z相關(guān)的1000個頁面，并且按照相關(guān)性、權(quán)威性排列判斷用戶意圖及人工智能 應(yīng)該說前4個挑戰(zhàn)現(xiàn)在的搜索引擎都已經(jīng)能夠比較好地解決，但判斷用戶意圖還處在初級階段。

正規(guī)網(wǎng)站建設(shè)這種快速收錄和更新也只能局限于高權(quán)重網(wǎng)站。很多頁面幾個月不被重新抓取和更新，也是非常常見的。網(wǎng)站建設(shè)哪家好要返回Z好的結(jié)果，搜索引擎也必須抓取盡量全面的頁面，這就需要解決很多技術(shù)問題。一些網(wǎng)站并不利于搜索引擎蜘蛛爬行和抓取，諸如網(wǎng)站鏈接結(jié)構(gòu)的缺陷、大量使用Flash、JavaScript腳本，或者把內(nèi)容放在用戶必須登錄以后才能訪問的部分，都培大了搜索引擎抓取內(nèi)容的難度。

無極正規(guī)網(wǎng)站建設(shè)然后是百度快照鏈接，用戶可以點擊快照，查看存儲在百度數(shù)據(jù)庫中的頁面內(nèi)容。當(dāng)頁面被刪除或者有其他技術(shù)問題導(dǎo)致不能打開網(wǎng)站時，用戶至少還可以從快照中查看想要的內(nèi)容。網(wǎng)站建設(shè)哪家好用戶所搜索的關(guān)鍵詞在標(biāo)題及說明部分都用紅色高亮顯示。用戶可以非?？焖俚乜吹巾撁媾c自己搜索的關(guān)鍵詞相關(guān)性如何。網(wǎng)頁快照鏈接后面有時還有一個“類似結(jié)果”鏈接。用戶點擊類似結(jié)果后可以看到與這個頁面相似的其他網(wǎng)頁。

正規(guī)網(wǎng)站建設(shè)這里的關(guān)鍵詞選取是在分詞、去停止詞、消噪之后。實驗表明，通常選取10個特征關(guān)鍵詞就可以達到比較高的計算準(zhǔn)確性，再選取更多詞對去重準(zhǔn)確性提高的貢獻也就不大了。典型的指紋計算方法如MD5算法（信息摘要算法第五版）。網(wǎng)站建設(shè)哪家好這類指紋算法的特點是，輸入（特征關(guān)鍵詞）有任何微小的變化，都會導(dǎo)致計算出的指紋有很大差距。了解了搜索引擎的去重算法，網(wǎng)站優(yōu)化人員就應(yīng)該知道簡單地“的”、“地”、“得”、調(diào)換段落順序這種所謂偽原創(chuàng)，并不能逃過搜索引擎的去重算法，因為這樣的操作無法改變文章的特征關(guān)鍵詞。

正規(guī)網(wǎng)站建設(shè)鏈接關(guān)系計算也是預(yù)處理中很重要的一部分?，F(xiàn)在所有的主流搜索引擎排名因素中都包含網(wǎng)頁之間的鏈接流動信息。搜索引擎在抓取頁面內(nèi)容后，必須事前計算出：頁面上有哪些鏈接指向哪些其他頁面，每個頁面有哪些導(dǎo)入鏈接，鏈接使用了什么錨文字，網(wǎng)站建設(shè)哪家好這些復(fù)雜的鏈接指向關(guān)系形成了網(wǎng)站和頁面的鏈接權(quán)重。Google PR值就是這種鏈接關(guān)系的Z主要體現(xiàn)之一。其他搜索引擎也都進行類似計算，雖然它們并不稱為PR。