基于kinect的深度增強與繪制技術(shù)的研究.pdf

1、隨著視頻技術(shù)的迅速發(fā)展和應(yīng)用，用2D視頻描述的世界已不能滿足觀眾日益增長的視覺需求。而3D視頻描述的世界與人的視覺更加匹配，使人們在觀看時能獲得豐富的立體感和沉浸感。相比于當(dāng)前流行的高清視頻，三維/多視點視頻對存儲和傳輸要求更高，并隨著視點個數(shù)的增加而呈線性增長的趨勢。而目前的存儲介質(zhì)和網(wǎng)絡(luò)狀況對于單路2D高清視頻應(yīng)用尚略顯不足，當(dāng)然更是無法滿足自由視點立體視頻對存儲空間和網(wǎng)絡(luò)帶寬的要求。所以多視點視頻走向應(yīng)用首先要解決的問題就是數(shù)據(jù)量

2、問題，而解決數(shù)據(jù)量問題的關(guān)鍵是立體視頻3D場景信息的表示問題，即如何更加有效地表示3D場景來減少數(shù)據(jù)的冗余。本研究在多視點視頻的理論基礎(chǔ)上，提出了利用Kinect來完成深度的實時獲取并進(jìn)行多視點繪制。主要工作和成果如下：
　　1.提出一種新穎的背景模型更新方法，利用kinect采集深度圖像的過程中，采用初始幀來不斷更新高斯背景的模型，以達(dá)到最好的背景模型匹配。
　　2.提出了基于高斯混合模型的kinect圖像增強算法，采用高

3、斯混合模型（GMM）來分離深度圖像的前景和背景，針對空洞出現(xiàn)的區(qū)域做不同的處理。背景空洞采用對應(yīng)的背景值填充，前景空洞采用紋理圖+距離函數(shù)+背景圖的權(quán)值函數(shù)來確定空洞處的深度值，獲取到可靠的深度圖像。
　　3.提出了基于幾何模型的虛擬視點繪制方法，針對深度圖像繪制（DIBR）后產(chǎn)生的空洞問題，先用高斯混合模型來分離繪制后新視點圖像的前背景，根據(jù)DIBR后空洞存在的區(qū)域分為前景空洞和背景空洞，背景空洞我們利用背景的信息來填充，前景空