基于DSP的視頻與音頻聯(lián)合目標(biāo)跟蹤系統(tǒng).pdf

1、隨著科技的不斷進(jìn)步，人工智能技術(shù)得到了快速的發(fā)展，其中智能跟蹤系統(tǒng)的發(fā)展已經(jīng)日趨成熟，從過去的被動(dòng)跟蹤模式逐步轉(zhuǎn)向主動(dòng)跟蹤模式，從基于單一的攝像頭視頻跟蹤發(fā)展到基于攝像頭和麥克風(fēng)陣列的視頻與音頻信息聯(lián)合的跟蹤方式。
　　 本文主要研究了基于視頻與音頻信息聯(lián)合的跟蹤系統(tǒng)。這種基于多信息聯(lián)合的跟蹤方式，能夠互補(bǔ)視頻跟蹤與音頻定位技術(shù)的優(yōu)缺點(diǎn)，采用音頻定位輔助視頻跟蹤的聯(lián)合方法，可以達(dá)到更好的目標(biāo)跟蹤效果。文中分別給出了視頻和音頻跟蹤

2、算法，其中視頻跟蹤采用運(yùn)動(dòng)目標(biāo)檢測(cè)算法和運(yùn)動(dòng)目標(biāo)跟蹤算法，而運(yùn)動(dòng)目標(biāo)檢測(cè)算法主要包含圖像時(shí)間差分技術(shù)和基于圖像區(qū)域生長法的圖像輪廓分割技術(shù)，運(yùn)動(dòng)目標(biāo)跟蹤算法則主要使用模板匹配技術(shù)實(shí)施視頻跟蹤；音頻定位技術(shù)則采用聲道時(shí)延的搜索方法，與視頻跟蹤算法相近，主要包含聲道模板信息提取算法和聲道模板匹配算法等實(shí)現(xiàn)音頻定位。跟蹤系統(tǒng)的設(shè)計(jì)主要基于TMS320DM642開發(fā)板。視頻跟蹤部分使用球形攝像頭獲取視頻信息，音頻部分使用雙麥克風(fēng)設(shè)計(jì)獲取音頻信息