中文詞法句法語(yǔ)義聯(lián)合分析模型研究.pdf

1、中文句子級(jí)別的基本分析技術(shù)能為自然語(yǔ)言處理相關(guān)應(yīng)用提供基礎(chǔ)的支撐，它主要由詞法、句法和語(yǔ)義分析三部分組成。其中詞法分析包含分詞和詞性標(biāo)注兩個(gè)級(jí)聯(lián)的任務(wù)；句法分析有短語(yǔ)結(jié)構(gòu)和依存結(jié)構(gòu)句法分析兩種主流的分析手段；而對(duì)于語(yǔ)義分析，本文著重于語(yǔ)義依存分析。這些任務(wù)之間是存在著層次關(guān)系的，對(duì)于一個(gè)句子本文首先要進(jìn)行分詞，然后是詞性標(biāo)注，緊接著是短語(yǔ)結(jié)構(gòu)或者依存結(jié)構(gòu)句法分析，最后是語(yǔ)義依存分析。
　　傳統(tǒng)的分析方法一般按照層次順序依次使用各個(gè)

2、任務(wù)最先進(jìn)的模型進(jìn)行處理，這種方法被稱為串行分析的方法。它存在兩個(gè)方面的問(wèn)題：第一點(diǎn)是錯(cuò)誤蔓延問(wèn)題，即低層的錯(cuò)誤會(huì)進(jìn)一步擴(kuò)散到高層；第二點(diǎn)是每層局部?jī)?yōu)化，因此低層的任務(wù)無(wú)法充分使用高層的信息。這兩個(gè)問(wèn)題使得聯(lián)合分析模型的方法得到了廣泛的關(guān)注，它將多個(gè)層級(jí)相鄰的任務(wù)放在一個(gè)統(tǒng)一的模型中來(lái)處理，從而避免這兩個(gè)問(wèn)題，因此能夠提高各個(gè)任務(wù)的分析性能；同時(shí)它還可以使得自然語(yǔ)言處理的研究人員能更好的理解各個(gè)任務(wù)之間的相互關(guān)系。本論文對(duì)聯(lián)合分析模型展

3、開(kāi)了四個(gè)方面的研究工作，分別如下所示：
　　首先，針對(duì)詞法中的分詞詞性標(biāo)注，本文對(duì)提升其聯(lián)合分析模型的領(lǐng)域移植能力進(jìn)行了研究。領(lǐng)域移植問(wèn)題最有效的解決方法是標(biāo)注少量規(guī)模的目標(biāo)領(lǐng)域語(yǔ)料，本文在標(biāo)注語(yǔ)料的具體方式上進(jìn)行改進(jìn)，提出將句子標(biāo)注和詞典標(biāo)注相結(jié)合，使得在固定的標(biāo)注代價(jià)下，分詞詞性標(biāo)注聯(lián)合分析模型的領(lǐng)域移植能力進(jìn)一步增強(qiáng)。實(shí)驗(yàn)結(jié)果表明這種結(jié)合的方法能取得更好的領(lǐng)域移植效果。
　　其次，針對(duì)詞性標(biāo)注和依存句法，本文對(duì)提高其聯(lián)

4、合分析模型的效率進(jìn)行了研究。本文使用一種模型融合和過(guò)訓(xùn)練相結(jié)合的方法，一方面通過(guò)模型融合可以使得聯(lián)合分析模型精度進(jìn)一步提高但是其解碼速度也進(jìn)一步的下降，而另一方面通過(guò)過(guò)訓(xùn)練可以使得一個(gè)速度快但是精度低的聯(lián)合分析模型在前面融合模型的幫助下，準(zhǔn)確率大幅度提升，從而得到一個(gè)分析速度提升十倍以上而且精度沒(méi)有任何的損失的聯(lián)合分析模型。
　　緊接著，針對(duì)分詞詞性標(biāo)注和句法分析，本文利用大部分中文詞語(yǔ)存在著內(nèi)部結(jié)構(gòu)這一特點(diǎn)，提出字級(jí)別的中文句法

5、分析方法，從而非常自然的將詞法分析和句法分析聯(lián)合在一起，得到了中文詞法句法大統(tǒng)一的聯(lián)合分析模型。實(shí)驗(yàn)結(jié)果表明，這種字級(jí)別的分析方法能有效的提升中文詞法句法的性能，取得了目前最好的結(jié)果。
　　最后，針對(duì)句法分析和語(yǔ)義分析，本文依托于依存分析這一手段，使得語(yǔ)義分析和句法分析的聯(lián)合變得非常方便，從而得到了句法依存和語(yǔ)義依存的聯(lián)合分析模型。由于中文語(yǔ)義依存分析的方法以前很少被用作于語(yǔ)義分析，因此本文首先從理論和實(shí)驗(yàn)兩方面表明語(yǔ)義依存分析作