基于正向最大匹配算法的優(yōu)化算法ImpFMMseg的實(shí)現(xiàn).pdf

1、由于來自于網(wǎng)絡(luò)的信息具備信息量大、信息來源復(fù)雜等特點(diǎn)，人們?cè)诓檎易约盒枰男畔r(shí)，已經(jīng)習(xí)慣使用搜索引擎作為信息篩選的工具。傳統(tǒng)的主要查詢模式有目錄查詢、關(guān)鍵詞查詢等，這些模式的應(yīng)用在一定程度上簡(jiǎn)化了查詢過程，即便如此，它們?nèi)匀淮嬖诟髯缘木窒扌?。近年來，自然語言理解領(lǐng)域的中外專家們一直致力于將自然語言理解技術(shù)與搜索技術(shù)更好地結(jié)合。與傳統(tǒng)查詢模式相比，自然語言查詢模式的優(yōu)勢(shì)在于它的人性化和以保證查詢效率為前提的準(zhǔn)確率。漢語自動(dòng)分詞是目前中文

2、信息處理領(lǐng)域公認(rèn)的一大難題，也是自然語言理解研究領(lǐng)域中最基本的一個(gè)環(huán)節(jié)。中文自動(dòng)分詞就是將用自然語言書寫的文章、句段經(jīng)計(jì)算機(jī)處理后，以詞為單位逐詞輸出，為緊隨其后的加工處理提供先決條件?？梢?，中文自動(dòng)分詞是自然語言處理的第一個(gè)步驟，其重要性勿庸置疑。在本文的四個(gè)章節(jié)中，筆者研究了中文自動(dòng)分詞的背景、發(fā)展現(xiàn)狀及課題意義，分析了中文自動(dòng)分詞的三種常用算法并比較了它們的優(yōu)劣，簡(jiǎn)要介紹了常用的幾種漢字編碼規(guī)范，最后對(duì)基于字符串匹配的分詞算法中的