版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領(lǐng)
文檔簡介
1、專有名詞的識別是中文信息處理領(lǐng)域的重要研究課題之一,目前尚未得到很好的解決。在大規(guī)模真實文本為基礎(chǔ)的語料庫研究的重要性日益突顯的情況下,如何提高大規(guī)模語料庫的質(zhì)量成為關(guān)鍵,而專有名詞的識別質(zhì)量是影響語料庫加工質(zhì)量的一個重要因素,專有名詞識別的自動化也能提高大規(guī)模語料庫加工效率。此外,在信息抽取、問答系統(tǒng)、術(shù)語學研究等各個研究領(lǐng)域應用領(lǐng)域,專有名詞的識別也是其基礎(chǔ)性步驟。 本文針對真實中文文本中較為頻繁出現(xiàn)的人名、地理政治地名還有
2、組織機構(gòu)名三類專有名詞,提出了一種基于動態(tài)貝葉斯網(wǎng)模型的專有名詞自動識別方法,該方法把文本中的局部特征、全局特征及語言學經(jīng)驗知識融入一個極具表達和推導能力的隨機概率模型中,可以很好地識別專有名詞。研究內(nèi)容主要包括以下幾個方面: 1.對專有名詞的分類做了較好的研究,分析它們在單句中的局部特征,在此基礎(chǔ)上,建立了專有名詞的局部特征變量之間的相互依賴關(guān)系。 2.研究了專有名詞在真實中文文本的互指等語篇信息,利用有效的互指消解規(guī)
3、則,解決了專有名詞名義性互指等問題,把全局信息融入系統(tǒng),保證了有效地識別專有名詞。 3.采用了基準模型與動態(tài)貝葉斯網(wǎng)模型相結(jié)合的方法,取長補短,充分利用了兩種模型的各自優(yōu)點,既保證了識別系統(tǒng)的效率,也保證了識別結(jié)果的準確率。 4.為了提高專有名詞識別效果,我們考慮了自然語言文本中的局部信息,此外更主要的是考察其語篇信息,并且針對中文文本中人名、組織機構(gòu)名及地理政治名的識別,構(gòu)建專有名詞識別動態(tài)貝葉斯模型(DBNS)。我們
4、把“是否某類專有名詞”作為分詞后中文文本的每個詞的屬性之一,從而把專有名詞識別問題轉(zhuǎn)換成一個分類問題。特別是考慮了正在識別的詞與已經(jīng)識別為某類專有名詞的前一個詞之間的一種聯(lián)系等語篇信息,綜合利用了隨機模型和基于特征推理方法的優(yōu)點。 我們選用山西大學中文評測語料中共230篇作為實驗材料,隨機抽取其中180篇用于訓練動態(tài)貝葉斯模型參數(shù),剩余的50篇用于測試,然后同Nymble模型單獨識別的結(jié)果比較,我們把動態(tài)貝葉斯模型作為Nymbl
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 眾賞文庫僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責。
- 6. 下載文件中如有侵權(quán)或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 中文專有名詞識別的研究.pdf
- 基于轉(zhuǎn)換學習的專有名詞識別.pdf
- 專有名詞查詢
- 燈飾英語專有名詞
- 房地產(chǎn)專有名詞
- 《牙買加》專有名詞的翻譯策略.pdf
- 專有名詞泛化的認知研究.pdf
- 漢語專有名詞拼寫規(guī)范研究.pdf
- 家裝知識匯總材料專有名詞
- 基于NSP和CRFs雙層模型的專有名詞識別方法.pdf
- 漢語語言處理中專有名詞的提取和識別.pdf
- 專有名詞“類指義”的認知分析.pdf
- 面向漢語專有名詞識別的支持向量機方法研究.pdf
- 古代表示升降官職的專有名詞
- 材料化學常見的專有名詞解釋
- 專有名詞作指稱語的語用研究.pdf
- 《牙買加》專有名詞的翻譯策略_15241.pdf
- 專有名詞漢譯規(guī)范化問題的探討.pdf
- 國語辭典收錄的專有名詞研究.pdf
- 汽車專有名詞術(shù)語匯總解析
評論
0/150
提交評論