語音手語合成系統(tǒng)研究與開發(fā).pdf

1、聾啞人作為社會的弱勢群體，在生活、學(xué)習(xí)、娛樂方面由于受到溝通語言的限制，可使用的資源非常少。手語作為聾啞人之間溝通、交流的主要語言，需要得到更加規(guī)范化的推廣。隨著社會信息化的發(fā)展，建立一個健全人與聾啞人之間的溝通橋梁，變成一個極為迫切的需求。本文即在這樣的大背景下產(chǎn)生。
　　 本文主要做了以下幾方面的工作:
　　 語音識別方法的研究，包括對傳統(tǒng)算法的研究，已有語音識別引擎SDK的研究，最終選用SDK的方式，實現(xiàn)系統(tǒng)的語音

2、識別功能。
　　 中文語義分析的實現(xiàn)。本文使用中科院的HHMM模型，并對其詞典存儲方式做了改進(jìn)，實現(xiàn)了系統(tǒng)的語義分析功能。
　　 虛擬人建模的實現(xiàn)。本文分析了人體運動的基本情況，對關(guān)節(jié)的運動約束做出了總結(jié)，通過學(xué)習(xí)不同的虛擬人建模方法，例如H-ANIM標(biāo)準(zhǔn)、建模軟件等等，最終建立了系統(tǒng)所需的虛擬人模型。
　　 虛擬人運動控制，本文分析了不同的虛擬人運動控制方法。學(xué)習(xí)并改進(jìn)了基于HAL鏈的實時逆向運動學(xué)求解算法，解

3、決了肘圓問題。并對虛擬人運動中的手語連音問題做了一定處理，使虛擬人的手勢表達(dá)與實際更相符合。提出了一套新的虛擬人手部動畫的演繹方式，并根據(jù)關(guān)節(jié)自由度的不同情況使用了不同的插值方法，使用本文提及的方式控制虛擬人，不需要存儲大量虛擬人運動的片段，更加靈活。
　　 在本文最后，對基于上述方法的系統(tǒng)做出了實現(xiàn)，并且從多個方面對系統(tǒng)的性能做出了評估。本系統(tǒng)在實用性方面來講，是首個將中文語音與手語合成相聯(lián)系的系統(tǒng)，將健全人與聾啞人的溝通變?yōu)?/p>