藏語句法分析系統(tǒng)的研究與實現(xiàn).pdf

1、句法分析是自然語言處理(NaturalLanguageProcession,NLP)領(lǐng)域中的關(guān)鍵問題之一,同時它也是公認(rèn)的一個研究難題,其主要任務(wù)是自動分析出句子的語法結(jié)構(gòu),也就是說,將一個線性序列的句子轉(zhuǎn)換成一個結(jié)構(gòu)化的句法樹。句法分析也是藏文信息處理中的一項重要課題,它的發(fā)展能帶動其他后繼工程如機(jī)器翻譯、問答系統(tǒng)、信息抽取等的發(fā)展。
　　藏文信息處理的分析技術(shù),大致可以分為兩個層面,一是淺層分析,如分詞,詞性標(biāo)注等;二是深層分

2、析,如句法分析,語義分析等。其中,淺層分析是對自然語言進(jìn)行進(jìn)一步深層分析的基礎(chǔ)。因此,本文首先在前人對藏語自動分詞、藏語自動詞性標(biāo)注以及藏語句子邊界識別等問題所做的工作基礎(chǔ)上,結(jié)合現(xiàn)代藏語語法理論,更進(jìn)一步地分析和研究了藏語真實文本中的緊縮詞、未登錄詞、交集型歧義、兼類詞以及藏語句子的邊界等關(guān)鍵問題,提出了相應(yīng)的識別方法和分析算法,并確定了一套基于功能分類的詞類標(biāo)記集;其次,介紹了短語結(jié)構(gòu)語法的相關(guān)理論。同時從理論上研究和分析了藏語短語

3、結(jié)構(gòu)及組合規(guī)則,從而確定了藏語短語分類及短語標(biāo)記集。在此基礎(chǔ)上,制定了一套基于上下文無關(guān)的藏語語法規(guī)則集,首次描述了藏語自然語言的形式化;再次,分析和研究了國內(nèi)外的句法分析方法,重點研究了LR分析算法,并根據(jù)藏語自身的特點,對標(biāo)準(zhǔn)LR分析算法進(jìn)行了一些改進(jìn),同時在規(guī)則的選取上采用了動態(tài)的排序方法,使得分析效率和分析結(jié)果的準(zhǔn)確率有一定的提高;最后,根據(jù)實際應(yīng)用,分析、設(shè)計了藏語自動分詞及詞性標(biāo)注一體化模塊、藏語句子邊界識別模塊、藏語句子結(jié)