
指令處理。靠譜石家莊建設(shè)網(wǎng)站查詢?cè)~完成分詞后,搜索引擎的默認(rèn)處理方式是在關(guān)鍵詞之間使用“與”邏輯。也就是說(shuō)用戶搜索“減肥方法”時(shí),程序分詞為“減肥”和“方法”兩個(gè)詞,搜索引擎排序時(shí)默認(rèn)認(rèn)為,用戶尋找的是既包含“減肥”,石家莊建設(shè)網(wǎng)站價(jià)格也包含“方法”的頁(yè)面。只包含“減肥”不包含“方法”,或者只包含“方法”不包含“減肥”的頁(yè)面,被認(rèn)為是不符合搜索條件的。當(dāng)然,這只是極為簡(jiǎn)化的為了說(shuō)明原理的說(shuō)法,實(shí)際上我們還是會(huì)看到只包含一部分關(guān)鍵詞的搜索結(jié)果。

靠譜石家莊建設(shè)網(wǎng)站搜索引擎蜘蛛抓取的原始頁(yè)面,并不能直接用于查詢排名處理。搜索引擎數(shù)據(jù)庫(kù)中的頁(yè)面數(shù)都在數(shù)萬(wàn)億級(jí)別以上,用戶輸入搜索詞后,靠排名程序?qū)崟r(shí)對(duì)這么多頁(yè)面分析相關(guān)性,計(jì)算量太大,不可能在一兩秒內(nèi)返回排名結(jié)果。石家莊建設(shè)網(wǎng)站價(jià)格因此抓取來(lái)的頁(yè)面必須經(jīng)過(guò)預(yù)處理,為Z后的查詢排名做好準(zhǔn)備。和爬行抓取一樣,預(yù)處理也是在后臺(tái)提前完成的,用戶搜索時(shí)感覺(jué)不到這個(gè)過(guò)程。搜索引擎預(yù)處理首先要做的就是從HTML文件中去除標(biāo)簽、程序,提取出可以用于排名處理的網(wǎng)頁(yè)面文字內(nèi)容。

靠譜石家莊建設(shè)網(wǎng)站關(guān)鍵詞常用程度。經(jīng)過(guò)分詞后的多個(gè)關(guān)鍵詞,對(duì)整個(gè)搜索字符串的意義貢獻(xiàn)并不相同。越常用的詞對(duì)搜索詞的意義貢獻(xiàn)越小,越不常用的詞對(duì)搜索詞的意義貢獻(xiàn)越大。舉個(gè)例子,假設(shè)用戶輸入的搜索詞是“我們冥王星”。石家莊建設(shè)網(wǎng)站價(jià)格“我們”這個(gè)詞常用程度非常高,在很多頁(yè)面上會(huì)出現(xiàn),它對(duì)“我們冥王星”這個(gè)搜索詞的辨識(shí)程度和意義相關(guān)度貢獻(xiàn)就很小。找出那些包含“我們”這個(gè)詞的頁(yè)面,對(duì)搜索排名相關(guān)性幾乎沒(méi)有什么影響,有太鄉(xiāng)頁(yè)面包含“我們”這個(gè)詞。而“冥王星”這個(gè)詞常用程度就比較低,對(duì)“我們冥王星”這個(gè)搜索詞的意義貢獻(xiàn)要大得多。

我們經(jīng)常在搜索結(jié)果中看到,排名會(huì)沒(méi)有明顯原因地上下波動(dòng),甚至可能刷新一下頁(yè)面,就看到不同的排名,有的時(shí)候網(wǎng)站數(shù)據(jù)也可能丟失。石家莊建設(shè)網(wǎng)站價(jià)格這些都可能與大規(guī)模數(shù)據(jù)存儲(chǔ)的技術(shù)難題有關(guān)。索引處理快速有效,具可擴(kuò)展性 搜索引擎將頁(yè)面數(shù)據(jù)抓取和存儲(chǔ)后,還要進(jìn)行索引處理,辛集靠譜石家莊建設(shè)網(wǎng)站包括鏈接關(guān)系的計(jì)算、正向索引、倒排索引等。由于數(shù)據(jù)庫(kù)中頁(yè)面數(shù)量大,進(jìn)行PR之類的迭代計(jì)算也是耗時(shí)費(fèi)力的。要想及時(shí)提供相關(guān)又及時(shí)的搜索結(jié)果,僅僅抓取沒(méi)有用,還必須進(jìn)行大量索引計(jì)算。由于隨時(shí)都有新數(shù)據(jù)、新頁(yè)面加入,因此索引處理也要具備很好的擴(kuò)展性。