互動(dòng)音樂桌.pdf

1、隨著人機(jī)交互技術(shù)的日益成熟，基于該技術(shù)的圖像處理已經(jīng)成為圖像識(shí)別領(lǐng)域重要的研究和發(fā)展方向之一。本文的主要研究?jī)?nèi)容為基于VC軟件平臺(tái)的實(shí)物目標(biāo)的識(shí)別系統(tǒng)的開發(fā)與實(shí)現(xiàn)。包括互動(dòng)音樂桌的硬件構(gòu)建，基于快速、有效的追蹤依附于目標(biāo)模塊的基準(zhǔn)性標(biāo)記、采集與識(shí)別系統(tǒng)；基于MIDI的音樂合成以及交互式平臺(tái)的計(jì)算機(jī)視覺框架。具體而言，主要包括以下內(nèi)容：
　　（1）硬件搭建。主要是采集系統(tǒng)的定位，拍攝環(huán)境的測(cè)試以及模塊的設(shè)計(jì)與可行性分析，同時(shí)就硬件搭

2、建的各個(gè)模塊的性能加以介紹；
　?。?）目標(biāo)模塊的基準(zhǔn)性標(biāo)記、采集與識(shí)別，本文首次將手勢(shì)圖案作為操作模塊引入該設(shè)計(jì)，為了互動(dòng)音樂桌的后期再開發(fā)做準(zhǔn)備；同時(shí)在圖像分割部分，針對(duì)紅外圖像的特點(diǎn)，以及攝像頭拍攝環(huán)境的影響導(dǎo)致多噪聲的原因，采用了基于二維最大熵閾值分割的方法，很好的解決了該問題；在音量控制部分，基于控制操作部分，操作模塊無幾何形狀的變化，采用了基于meanshift跟蹤算法來進(jìn)行定位，并較好的實(shí)現(xiàn)了跟蹤的實(shí)時(shí)性與準(zhǔn)確性，使

3、聲音的高低變化得到較為連續(xù)的控制；
　?。?）聲音與影像合成，主要是基于MIDI軟件庫的聲音合成。通過獲得的操作模塊的特征，確定模塊的圖樣，進(jìn)而向系統(tǒng)發(fā)送一定得MIDI指令來調(diào)取不同的MIDI音色、幅值、頻率等不同的信息量，產(chǎn)生音量不同，節(jié)奏各異，不同音色的聲音，通過調(diào)整使其可以產(chǎn)生較為平滑的樂曲。影像合成部分，主要是調(diào)用WAV的波形文件實(shí)時(shí)顯示波形；
　　（4）操作平臺(tái)。系統(tǒng)的操作平臺(tái)以VS2005為開發(fā)工具，生成可以人機(jī)