基于規(guī)則的藏語(yǔ)句法分析研究.pdf

1、本文對(duì)基于規(guī)則的藏語(yǔ)句法分析進(jìn)行了研究。句法分析是自然語(yǔ)言處理過(guò)程中一項(xiàng)基礎(chǔ)性的工作，從二十世紀(jì)四十年代末到現(xiàn)在，國(guó)內(nèi)外學(xué)者們?cè)O(shè)計(jì)了很多自然語(yǔ)言處理的形式模型，這些模型有基于短語(yǔ)結(jié)構(gòu)語(yǔ)法的形式模型、基于合一運(yùn)算的形式模型、基于依存和配價(jià)的形式模型、基于詞匯主義的形式模型、N元語(yǔ)法、數(shù)據(jù)平滑和隱馬爾可夫模型等，它們都對(duì)自然語(yǔ)言處理中的句法分析研究做出了積極的貢獻(xiàn)。文中所提基于規(guī)則的句法分析方法主要是指chomsky的上下文無(wú)關(guān)文法，也是基

2、于短語(yǔ)結(jié)構(gòu)的語(yǔ)法。分詞、詞性標(biāo)注以及句法結(jié)構(gòu)的樹(shù)形圖表示，都屬于句法分析的研究范疇。在描述分詞部分時(shí)，對(duì)分詞歧義類(lèi)型及消歧方法做了詳細(xì)的分析。除了利用傳統(tǒng)的最大概率匹配法分詞外，還提出了一種利用轉(zhuǎn)移概率消解分詞歧義的方法，文中稱(chēng)這種方法為詞性轉(zhuǎn)移概率消歧法，它在消解分詞歧義上比最大概率匹配法更優(yōu)越。自動(dòng)詞性標(biāo)注是在藏語(yǔ)HMM模型基礎(chǔ)上，用Viterbi算法進(jìn)行的，還對(duì)藏語(yǔ)中的典型詞性歧義及其消解方法做了分析。在句法結(jié)構(gòu)的自動(dòng)表示上，首先

3、把藏語(yǔ)句型分成六個(gè)大類(lèi)，并以此為依據(jù)，構(gòu)建了一個(gè)規(guī)模為480余個(gè)句法樹(shù)的樹(shù)庫(kù)，然后利用詞性串匹配法，以樹(shù)形圖表示出藏語(yǔ)句子的句法結(jié)構(gòu)。考慮到文中所用句法分析方法不能像線(xiàn)圖算法、LR算法和Earley算法那樣表示歧義句的句法結(jié)構(gòu)。因此，對(duì)藏語(yǔ)中的常見(jiàn)歧義句做了分類(lèi)，歸納出歧義句中存在的一些規(guī)律，利用概率上下文無(wú)關(guān)語(yǔ)法對(duì)句子歧義做了處理，使本文的句法分析系統(tǒng)具備解決簡(jiǎn)單歧義問(wèn)題的能力。文中設(shè)計(jì)的句法分析器，能按照詞性串匹配算法把樹(shù)庫(kù)中的所有