中文分詞是中文搜索引擎特有的步驟。搜索引擎存儲和處理頁面,以及用戶搜索都是以詞為基礎(chǔ)。英文等語言單詞與單詞之間有空格分隔,搜索引擎索引程序可以直接把句子劃分為單詞的集合。而中文詞與詞之間沒有任何分隔符,一個(gè)句子中的所有字和詞都是連在一起的。
中文分詞是中文搜索引擎特有的步驟。搜索引擎存儲和處理頁面,以及用戶搜索都是以詞為基礎(chǔ)。英文等語言單詞與單詞之間有空格分隔,搜索引擎索引程序可以直接把句子劃分為單詞的集合。而中文詞與詞之間沒有任何分隔符,一個(gè)句子中的所有字和詞都是連在一起的。搜索引擎必須首先分辨哪幾個(gè)字組成一個(gè)詞,哪些字本身就是一個(gè)詞。比如“醫(yī)院營銷”將被分詞為“醫(yī)院”和“營銷”兩個(gè)詞。
中文分詞方法基本上有兩種,一是基于詞典匹配,另一個(gè)是基于統(tǒng)計(jì);谠~典匹配的方法是指,將待分析的一段漢字與一個(gè)事先造好的詞典中的詞條進(jìn)行匹配,在待分析漢字串中掃描到詞典中己有的詞條則匹配成功,或者說切分出一個(gè)單詞。按照掃描方向,基于詞典的匹配法可以分為正向匹配和逆向匹配。按照匹配長度優(yōu)先級的不同,又可以分為最大匹配和最小匹配。將掃描方向和長度優(yōu)先混合,又可以產(chǎn)生正向最大匹配、逆向最大匹配等不同方法。詞典匹配方法計(jì)算簡單,其準(zhǔn)確度很大程度上取決于詞典的完整性和更新情況。
基于統(tǒng)計(jì)的分詞方法指的是分析大量文字樣本,計(jì)算出字與字相鄰出現(xiàn)的統(tǒng)計(jì)概率,幾個(gè)字相鄰出現(xiàn)越多,就越可能形成一個(gè)單詞;诮y(tǒng)計(jì)的方法優(yōu)勢是對新出現(xiàn)的詞反應(yīng)更快速,也有
利于消除歧義;谠~典匹配和統(tǒng)計(jì)的兩種分詞方法各有優(yōu)劣,實(shí)際使用中的分詞系統(tǒng)都是混合使用兩種方法,達(dá)到快速高效,又能識別生詞、新詞,消除歧義。中文分詞的準(zhǔn)確性往往影響搜索引擎排名的相關(guān)性。比如在百度搜索“醫(yī)院網(wǎng)絡(luò)營銷”:從快照中可以看到,百度把“醫(yī)院網(wǎng)絡(luò)營銷”這六個(gè)字當(dāng)成一個(gè)詞。
而在Google搜索同樣的詞:快照顯示Google將其分切為“醫(yī)院”,“網(wǎng)絡(luò)”和“營銷”三個(gè)詞。顯然百度切分得更為合理,搜索引擎優(yōu)化是一個(gè)完整的概念。Google分詞時(shí)傾向于更為細(xì)碎。再舉一個(gè)更明顯的例子。在Google搜索“點(diǎn)石互動(dòng)”四個(gè)字:快照顯示Google將其切分為“民營”,“醫(yī)院”及“營銷”三個(gè)詞。領(lǐng)域最知名的品牌,顯然并沒有進(jìn)入Google的詞典中。在百度搜索度將“醫(yī)院營銷”當(dāng)作一個(gè)詞。甚至在百度搜索“民營醫(yī)院營銷”,會“都當(dāng)成一個(gè)詞:這種分詞上的不同很可能是一些關(guān)鍵詞排名在不同搜索引擎有不同表現(xiàn)的原因之一。比如百度更喜歡搜索詞完整匹配地出現(xiàn)在頁面上,也就是說搜索”點(diǎn)石互動(dòng)“時(shí),這四個(gè)字連續(xù)完整出現(xiàn)更容易在百度獲得好的排名。
Google就與此不同,不太要求完整匹配。一些頁面出現(xiàn)”點(diǎn)石“和”互動(dòng)“兩個(gè)詞,但不必完整匹配地出現(xiàn),”點(diǎn)石“出現(xiàn)在前面,”互動(dòng)“出現(xiàn)在頁面的其他地方,這樣的頁面在Google搜索”點(diǎn)石互動(dòng)“時(shí),也可以獲得不錯(cuò)的排名。搜索引擎對頁面的分詞取決于詞庫的規(guī)模、準(zhǔn)確性和分詞算法的好壞,而不是取決于頁面本身如何,所以SEO人員對分詞所能做的很少。唯一能做的是在頁面上用某種形式提示搜索引擎,某幾個(gè)字應(yīng)該被當(dāng)作一個(gè)詞處理,尤其是可能產(chǎn)生歧義的時(shí)候,比如在頁面標(biāo)題、hl標(biāo)簽以及黑體中出現(xiàn)關(guān)鍵詞。如果頁面是關(guān)于”和服“的內(nèi)容,那么可以把”和服“這兩個(gè)字特意標(biāo)為黑體。如果頁面是關(guān)于”化妝和服裝“,可以把”服裝“兩個(gè)字標(biāo)為黑體。這樣,搜索引擎對頁面進(jìn)行分析時(shí)就知道標(biāo)為黑體的應(yīng)該是一個(gè)詞。
長沙科聯(lián)環(huán)保科技有限公司
長沙科聯(lián)環(huán)?萍加邢薰咀溆趪壹夐L沙經(jīng)濟(jì)技術(shù)開發(fā)區(qū),星沙工業(yè)園、我們以“科技創(chuàng)新,聯(lián)合共...南京尚上防腐木
南京尚上防腐木是一家專業(yè)致力于加工、制作、銷售戶外景觀防腐木,并為客戶設(shè)計(jì)安裝一站式服務(wù)的現(xiàn)...長沙昱霆機(jī)電有限公司
長沙昱霆機(jī)電有限公司是長沙空壓機(jī)_長沙空壓機(jī)保養(yǎng)_湖南空壓機(jī)維修_長沙空壓機(jī)機(jī)頭維修-長沙昱...湖南省土地學(xué)會,湖南土地學(xué)會,湖南土地學(xué)會官網(wǎng)
湖南省土地學(xué)會是全省土地科技工作者自愿組成,并依法登記的學(xué)術(shù)性、非盈利性、公益性的法人社會團(tuán)...湖南為美環(huán)保技術(shù)有限公司,醫(yī)療污水凈化機(jī)組...
湖南為美環(huán)保技術(shù)有限公司應(yīng)“綠水青山就是金山銀山”之勢而生,秉持“為民環(huán)保,美麗干凈”理想信...長沙租車公司-長沙鑫晨租車
長沙鑫晨租車(長沙租車網(wǎng))于2008年,已精工細(xì)作多年,F(xiàn)以成為長沙地區(qū)較早的租車公司之一。...聯(lián)系方式
地址:湖南省長沙市天心區(qū)韶山南路248號南園503室
電話:13637482004 0731-88571521
網(wǎng)址:http://sh-klkm.com/
郵箱:123@123007.com
微信咨詢
掃一掃進(jìn)移動(dòng)端