基于情感標注的MIDI驅(qū)動虛擬舞蹈系統(tǒng)設(shè)計.pdf

1、音樂驅(qū)動的虛擬現(xiàn)實技術(shù)是計算機圖形學的一個分支，有廣闊應(yīng)用前景?，F(xiàn)有的大部分研究工作多注重音樂與舞蹈動作一致性的研究，而忽略了音樂與舞蹈在情感層面上的聯(lián)系。針對這種情況，本文通過引入情感模型和情感的人工標注，以MIDI音源為驅(qū)動，結(jié)合已標注的音樂情感及舞蹈動作情感，實現(xiàn)了虛擬舞蹈的自動生成。 本文首先介紹MIDI格式文件和OpenGL平臺的相關(guān)知識，為基于MIDI音源文件的音頻解析和OpenGL技術(shù)的應(yīng)用奠定基礎(chǔ)；然后介紹了計算

2、機音樂情感分析、角色動畫和運動數(shù)據(jù)采集的相關(guān)知識，進而對本文所提出的虛擬舞蹈系統(tǒng)的設(shè)計進行介紹。整個系統(tǒng)采用模塊化設(shè)計思想，方便系統(tǒng)以后的改進與完善。 系統(tǒng)實現(xiàn)主要依托四個模塊：音樂解析模塊、運動數(shù)據(jù)采集模塊、情感標注模塊和動作編排模塊。音樂解析模塊主要負責將MIDI文件轉(zhuǎn)換成十六進制字符串，并對這些字符串進行解析得到音樂的節(jié)奏信息：運動數(shù)據(jù)采集模塊采集并記錄人體的運動過程，通過處理采集到的圖片序列建立三維人體模型和舞蹈動作規(guī)則

3、；情感標注模塊主要用于對音樂和動作序列的情感特征的人工標注；動作編排模塊則負責音樂和舞蹈之間匹配規(guī)則的制定以及舞蹈動作的編排。 本文所介紹的虛擬舞蹈系統(tǒng)采用了一個卡通女孩作為角色演員。系統(tǒng)的場景和角色模型的設(shè)計主要使用了OpenGL平臺和三維軟件。系統(tǒng)選擇若干標準動作序列作為舞蹈動作單元，例如抬手、抬腿、旋轉(zhuǎn)、跳躍、謝幕等動作，初步實現(xiàn)了人體基本的舞蹈動作，最終將選擇編排的舞蹈動作以三維動畫的方式展示出來。系統(tǒng)運行后，可以看到我