
有實(shí)力網(wǎng)站建設(shè)中文分詞,分詞是中文搜索引擎特有的步驟。搜索引擎存儲(chǔ)和處理頁(yè)面及用戶搜索都是以詞為基礎(chǔ)的。英文等語(yǔ)言單詞與單詞之間有空格分隔,搜索引擎索引程序可以直接把句子劃分為單詞的集合。而中文詞與詞之間沒(méi)有任何分隔符,一個(gè)句子中的所有字和詞都是連在一起的。網(wǎng)站建設(shè)價(jià)格搜索引擎必須首先分辨哪幾個(gè)字組成一個(gè)詞,哪些字本身就是一個(gè)詞。比如“減肥方法”將被分詞為“減肥”和“方法”兩個(gè)詞。中文分詞方法基本上有兩種,一種是基于詞典匹配,另一種是墓于統(tǒng)計(jì)。

搜索引擎面對(duì)的挑戰(zhàn)有實(shí)力網(wǎng)站建設(shè) 搜索引擎系統(tǒng)是Z復(fù)雜的計(jì)算系統(tǒng)之一,當(dāng)今主流搜索引擎服務(wù)商都是有財(cái)力、人力的大公司。即使有技術(shù)、人力、財(cái)力的保證,搜索引擎還是面臨很多技術(shù)挑戰(zhàn)。搜索引擎誕生后的十多年中,網(wǎng)站建設(shè)價(jià)格技術(shù)已經(jīng)得到了長(zhǎng)足的進(jìn)步。我們今天看到的搜索結(jié)果質(zhì)量與10年前相比已經(jīng)好得太多了。不過(guò)這還只是一個(gè)開(kāi)始,搜索引擎必然還會(huì)有更多創(chuàng)新,提供更多、更準(zhǔn)確的內(nèi)容??傮w來(lái)說(shuō),搜索引擎主要會(huì)面對(duì)以下幾方面的挑戰(zhàn)。

井陘網(wǎng)站建設(shè)搜索引擎是用戶網(wǎng)購(gòu)時(shí)Z常用的工具,5個(gè)人里就有3個(gè)說(shuō)他們網(wǎng)上購(gòu)物時(shí)總是或經(jīng)常使用搜索引擎,遠(yuǎn)遠(yuǎn)超出其他工具或網(wǎng)站。對(duì)英文網(wǎng)站有了解的都知道,歐美用戶更依賴搜索引擎,遇到任何問(wèn)題,首先想到的就是上搜索引擎搜索。越來(lái)越多的網(wǎng)站認(rèn)識(shí)到搜索流量的重要性,這也體現(xiàn)在搜索引擎市場(chǎng)規(guī)模的快速增長(zhǎng)上。網(wǎng)站建設(shè)價(jià)格2009年中國(guó)搜索引擎市場(chǎng)規(guī)模達(dá)69.5億元,相比2008年的50.3億元,年同比增長(zhǎng)38.2%,中國(guó)搜索引擎市場(chǎng)規(guī)模 由于經(jīng)濟(jì)危機(jī),2009年增長(zhǎng)已經(jīng)算是緩慢,2002年到2008年的增長(zhǎng)率都遠(yuǎn)遠(yuǎn)超過(guò)38.2%。

用戶搜索“歷史”、“分類”這些關(guān)鍵詞時(shí)僅僅因?yàn)轫?yè)面上有這些詞出現(xiàn)而返回博客帖子是毫無(wú)意義的,完全不相關(guān)。有實(shí)力網(wǎng)站建設(shè)所以這些區(qū)塊都屬于噪聲,對(duì)頁(yè)面主題只能起到分散作用。搜索引擎需要識(shí)別并消除這些噪聲,排名時(shí)不使用噪聲內(nèi)容。網(wǎng)站建設(shè)價(jià)格消噪的基本方法是根據(jù)HTML標(biāo)簽對(duì)頁(yè)面分塊,區(qū)分出頁(yè)頭、導(dǎo)航、正文、頁(yè)腳、廣告等區(qū)域,在網(wǎng)站上大量重復(fù)出現(xiàn)的區(qū)塊往往屬于噪聲。對(duì)頁(yè)面進(jìn)行消噪后,剩下的才是頁(yè)面主體內(nèi)容。

有實(shí)力網(wǎng)站建設(shè)關(guān)鍵詞常用程度。經(jīng)過(guò)分詞后的多個(gè)關(guān)鍵詞,對(duì)整個(gè)搜索字符串的意義貢獻(xiàn)并不相同。越常用的詞對(duì)搜索詞的意義貢獻(xiàn)越小,越不常用的詞對(duì)搜索詞的意義貢獻(xiàn)越大。舉個(gè)例子,假設(shè)用戶輸入的搜索詞是“我們冥王星”。網(wǎng)站建設(shè)價(jià)格“我們”這個(gè)詞常用程度非常高,在很多頁(yè)面上會(huì)出現(xiàn),它對(duì)“我們冥王星”這個(gè)搜索詞的辨識(shí)程度和意義相關(guān)度貢獻(xiàn)就很小。找出那些包含“我們”這個(gè)詞的頁(yè)面,對(duì)搜索排名相關(guān)性幾乎沒(méi)有什么影響,有太鄉(xiāng)頁(yè)面包含“我們”這個(gè)詞。而“冥王星”這個(gè)詞常用程度就比較低,對(duì)“我們冥王星”這個(gè)搜索詞的意義貢獻(xiàn)要大得多。

指令處理。有實(shí)力網(wǎng)站建設(shè)查詢?cè)~完成分詞后,搜索引擎的默認(rèn)處理方式是在關(guān)鍵詞之間使用“與”邏輯。也就是說(shuō)用戶搜索“減肥方法”時(shí),程序分詞為“減肥”和“方法”兩個(gè)詞,搜索引擎排序時(shí)默認(rèn)認(rèn)為,用戶尋找的是既包含“減肥”,網(wǎng)站建設(shè)價(jià)格也包含“方法”的頁(yè)面。只包含“減肥”不包含“方法”,或者只包含“方法”不包含“減肥”的頁(yè)面,被認(rèn)為是不符合搜索條件的。當(dāng)然,這只是極為簡(jiǎn)化的為了說(shuō)明原理的說(shuō)法,實(shí)際上我們還是會(huì)看到只包含一部分關(guān)鍵詞的搜索結(jié)果。