基于內(nèi)容的三維視頻立體化及舒適度增強(qiáng)方法研究.pdf

1、立體視頻技術(shù)給觀眾帶來(lái)的不僅僅是圖像質(zhì)量的提升，而是一種全新的視覺(jué)體驗(yàn)，但是目前一方面隨著分辨率的提高，視頻編碼復(fù)雜度急劇增加，另一方面立體視頻技術(shù)的視覺(jué)舒適度問(wèn)題也限制了其廣泛應(yīng)用于各行各業(yè)。因此，本文深入研究如何在不影響主觀觀看質(zhì)量的情況下顯著降低編碼端計(jì)算復(fù)雜度以及在確保深度感的情況下增強(qiáng)立體視頻視覺(jué)舒適度，主要研究?jī)?nèi)容如下：
　　（1）在保證虛擬視點(diǎn)繪制質(zhì)量的前提下，為了降低深度視頻的編碼復(fù)雜度，提出了一種基于最大可容忍深

2、度失真(Maximum Tolerable Depth Distortion,MTDD)模型的低復(fù)雜度深度編碼算法。具體而言，將MTDD模型引入到率失真代價(jià)函數(shù)，通過(guò)對(duì)編碼單元(Coding Unit,CU)進(jìn)行失真度量判決，如果對(duì)當(dāng)前CU進(jìn)行編碼不會(huì)導(dǎo)致可察覺(jué)的視點(diǎn)合成失真，則失真度量只考慮深度編碼失真，否則失真度量同時(shí)考慮深度編碼失真和視點(diǎn)合成失真,從而降低編碼復(fù)雜度。實(shí)驗(yàn)結(jié)果表明，所提出的算法在不降低虛擬視點(diǎn)繪制質(zhì)量和不增加編碼碼

3、率的情況下，降低立體視頻編碼復(fù)雜度56％以上。
　?。?）針對(duì)現(xiàn)有立體化過(guò)程中采用經(jīng)驗(yàn)方式選取匯聚平面，未能充分考慮視覺(jué)舒適度因素，因此為了提高立體3D圖像視覺(jué)舒適度，得到令人滿意的視覺(jué)體驗(yàn)，提出了零視差平面優(yōu)化的三維視頻立體化方案。通過(guò)空間頻率、視差響應(yīng)、以及視覺(jué)注意三者預(yù)測(cè)視覺(jué)不適強(qiáng)度；然后，根據(jù)視覺(jué)不適強(qiáng)度圖依據(jù)一定的準(zhǔn)則選擇一個(gè)最佳零視差平面(zero-disparity plane,ZDP)；最后，根據(jù)選定的ZDP自動(dòng)調(diào)

4、整正負(fù)視差范圍。實(shí)驗(yàn)結(jié)果證明了該方案的有效性，在保持深度感不變的情況下，提高視覺(jué)舒適度。
　　（3）視覺(jué)舒適度和深度感是影響立體3D體驗(yàn)的兩個(gè)重要因素，針對(duì)現(xiàn)有舒適度增強(qiáng)算法以犧牲深度感為代價(jià)來(lái)提高舒適度，本文提出了一種新的視覺(jué)舒適度和深度感聯(lián)合優(yōu)化方案。所提出的優(yōu)化方案的主要目的是提高整體立體3D體驗(yàn)質(zhì)量，包括兩個(gè)階段：第一階段層獨(dú)立的視差調(diào)整過(guò)程，在同時(shí)滿足視覺(jué)舒適度和深度感限制的條件下，迭代調(diào)整每一個(gè)深度層內(nèi)的視差范圍直到滿