欧美日韩精品在线,国内精品久久久久久久久,一级毛片恃级毛片直播,清纯唯美亚洲综合欧美色

SWJ小談:中文分詞的作用與概述-說(shuō)教篇_SEO優(yōu)化教程

編輯Tag賺U幣
教程Tag:暫無(wú)Tag,歡迎添加,賺取U幣!

推薦:給Google提交視頻Sitemap
Google治理員工具中所支持的Sitemap種類達(dá)到了四種,其中包括這種VideoSitemap,主要是給那些視頻較多的網(wǎng)站,或者視頻寄放網(wǎng)站所用。提交的方法同普通的通用s

隨著信息的飛速增長(zhǎng),使搜索引擎成為人們查找信息的首選工具,Google、百度、yahoo、最近新出的網(wǎng)易的有道 等大型搜索引擎一直是人們討論的話題。

隨著搜索市場(chǎng)價(jià)值的不斷增加,越來(lái)越多的公司開(kāi)發(fā)出屬于自己的搜索引擎,阿里巴巴的商機(jī)搜索、8848的購(gòu)物搜索等也陸續(xù)面世,自然,搜索引擎技術(shù)也成為技術(shù)人員關(guān)注的熱點(diǎn)之一。

搜索引擎技術(shù)的研究,國(guó)外比中國(guó)要早近十年,從最早的Archie,到后來(lái)的Excite,以及altvista、overture、google等搜索引擎面世,搜索引擎發(fā)展至今,已經(jīng)有十幾年的歷史,而國(guó)內(nèi)開(kāi)始研究搜索引擎是在上世紀(jì)末本世紀(jì)初。在許多領(lǐng)域,都是國(guó)外的產(chǎn)品和技術(shù)一統(tǒng)天下,非凡是當(dāng)某種技術(shù)在國(guó)外研究多年而國(guó)內(nèi)才開(kāi)始的情況下。例如操作系統(tǒng)、字處理軟件、瀏覽器等等,但搜索引擎卻是個(gè)例外。雖然在國(guó)外搜索引擎技術(shù)早就開(kāi)始研究,但在國(guó)內(nèi)還是陸續(xù)涌現(xiàn)出優(yōu)秀的搜索引擎,像百度(http://www.baidu.com)、和最近剛出的 有道(http://www.youdao.com)等。目前在中文搜索引擎領(lǐng)域,國(guó)內(nèi)的搜索引擎已經(jīng)和國(guó)外的搜索引擎效果上相差不遠(yuǎn)。但是SWJ認(rèn)為其技術(shù)能力等方面還是相差國(guó)外先進(jìn)水平有一定的距離 不過(guò),這距離在慢慢的拉近中! 談到搜索引擎的分詞技術(shù)之所以能形成現(xiàn)在這樣的局面,有一個(gè)重要的原因就在于中文和英文兩種語(yǔ)言自身的書(shū)寫方式不同。

什么是中文分詞?

眾所周知,英文是以詞為單位的,詞和詞之間是靠空格隔開(kāi),而中文是以字為單位,句子中所有的字連起來(lái)才能描述一個(gè)意思。例如,英文句子I am a student,用中文則為:“我是一個(gè)學(xué)生”。計(jì)算機(jī)可以很簡(jiǎn)單通過(guò)空格知道student是一個(gè)單詞,但是不能很輕易明白“學(xué)”、“生”兩個(gè)字合起來(lái)才表示一個(gè)詞。把中文的漢字序列切分成有意義的詞,就是中文分詞,有些人也稱為切詞。我是一個(gè)學(xué)生,分詞的結(jié)果是:我 是 一個(gè) 學(xué)生。

中文分詞和搜索引擎關(guān)系與影響!

中文分詞到底對(duì)搜索引擎有多大影響?對(duì)于搜索引擎來(lái)說(shuō),最重要的并不是找到所有結(jié)果,因?yàn)樵谏习賰|的網(wǎng)頁(yè)中找到所有結(jié)果沒(méi)有太多的意義,沒(méi)有人能看得完,最重要的是把最相關(guān)的結(jié)果排在最前面,這也稱為相關(guān)度排序。中文分詞的準(zhǔn)確與否,經(jīng)常直接影響到對(duì)搜索結(jié)果的相關(guān)度排序。筆者最近替朋友找一些關(guān)于日本和服的資料,在搜索引擎上輸入“和服”,得到的結(jié)果就發(fā)現(xiàn)了很多問(wèn)題。

小談:中文分詞技術(shù)

中文分詞技術(shù)屬于 自然語(yǔ)言處理技術(shù)范疇,對(duì)于一句話,人可以通過(guò)自己的知識(shí)來(lái)明白哪些是詞,哪些不是詞,但如何讓計(jì)算機(jī)也能理解?其處理過(guò)程就是分詞算法。

現(xiàn)有的分詞算法可分為三大類:基于字符串匹配的分詞方法、基于理解的分詞方法和基于統(tǒng)計(jì)的分詞方法。

1、基于字符串匹配的分詞方法

這種方法又叫做機(jī)械分詞方法,它是按照一定的策略將待分析的漢字串與一個(gè)“充分大的”機(jī)器詞典中的詞條進(jìn)行配,若在詞典中找到某個(gè)字符串,則匹配成功(識(shí)別出一個(gè)詞)。按照掃描方向的不同,串匹配分詞方法可以分為正向匹配和逆向匹配;按照不同長(zhǎng)度優(yōu)先匹配的情況,可以分為最大(最長(zhǎng))匹配和最小(最短)匹配;按照是否與詞性標(biāo)注過(guò)程相結(jié)合,又可以分為單純分詞方法和分詞與標(biāo)注相結(jié)合的一體化方法。常用的幾種機(jī)械分詞方法如下:

1)正向最大匹配法(由左到右的方向);

2)逆向最大匹配法(由右到左的方向);

3)最少切分(使每一句中切出的詞數(shù)最小)。

還可以將上述各種方法相互組合,例如,可以將正向最大匹配方法和逆向最大匹配方法結(jié)合起來(lái)構(gòu)成雙向匹配法。由于漢語(yǔ)單字成詞的特點(diǎn),正向最小匹配和逆向最小匹配一般很少使用。一般說(shuō)來(lái),逆向匹配的切分精度略高于正向匹配,碰到的歧義現(xiàn)象也較少。統(tǒng)計(jì)結(jié)果表明,單純使用正向最大匹配的錯(cuò)誤率為1/169,單純使用逆向最大匹配的錯(cuò)誤率為1/245。但這種精度還遠(yuǎn)遠(yuǎn)不能滿足實(shí)際的需要。實(shí)際使用的分詞系統(tǒng),都是把機(jī)械分詞作為一種初分手段,還需通過(guò)利用各種其它的語(yǔ)言信息來(lái)進(jìn)一步提高切分的準(zhǔn)確率。

分享:通過(guò)SEO高效進(jìn)行海外推廣
說(shuō)到海外推廣,可能大家也不會(huì)生疏,在這里也有許多做外貿(mào)、做英文站的朋友。一般來(lái)說(shuō),海外推廣主要有這些推廣方式,如:B2B平臺(tái),email營(yíng)銷,國(guó)際展會(huì),黃頁(yè)

共2頁(yè)上一頁(yè)12下一頁(yè)
來(lái)源:模板無(wú)憂//所屬分類:SEO優(yōu)化教程/更新時(shí)間:2007-12-28
相關(guān)SEO優(yōu)化教程