3D視頻編碼中深度信息優(yōu)化及場景背景編碼技術(shù)研究.pdf

1、隨著科技的進步，網(wǎng)絡(luò)通信技術(shù)、數(shù)字多媒體技術(shù)以及計算機視覺技術(shù)都得到快速的發(fā)展，進而促進了圖像采集水平的不斷提高以及多媒體應(yīng)用中數(shù)字視頻業(yè)務(wù)的不斷擴大?，F(xiàn)如今,多媒體應(yīng)用終端顯示的內(nèi)容也越來越豐富，基于國內(nèi)外各種標(biāo)準的視頻應(yīng)用早已成為人們?nèi)粘Ｉ?、工作、學(xué)習(xí)、娛樂、交際等方面不可缺少的東西，其中最為普遍的是三維（3D，3Dimensional）視頻應(yīng)用。3D視頻因其恢弘的場景、逼真的視覺效果以及強烈的視覺沖擊而深受消費者喜愛。3D視頻主

2、要是基于多視點視頻紋理加深度圖(Multi-view texture image plus depth map，MVD)的格式進行編碼的，因此，數(shù)據(jù)量非常龐大。而當(dāng)前有限的網(wǎng)絡(luò)傳輸帶寬和硬件存儲資源都無法承受如此大的數(shù)據(jù)量，進而對3D視頻的存儲、傳輸以及播放造成很大的困難。因而采用多視點視頻紋理加深度圖信息編碼格式編碼的3D視頻序列的高效率壓縮，就成了當(dāng)前3D視頻編碼的一個關(guān)鍵因素。因此本文針對3D視頻編碼，開展了兩項工作，意在提升3D

3、視頻編碼效率。本文的主要研究工作是：
　　1.提出了基于四叉樹劃分方式的深度-紋理間的運動矢量繼承
　　當(dāng)前3D-AVS2.0編碼標(biāo)準中對紋理圖和深度圖是分別進行獨立編碼的，但是，紋理圖和其相對應(yīng)的深度圖都是同一相機在同一時間同一位置同一角度對同一地點捕獲到的相同場景圖像，它們的運動特征是相似的。當(dāng)前3D-AVS2.0編碼平臺并沒有考慮它們之間的相關(guān)性，進而造成編碼比特的浪費。因此，針對3D-AVS2.0編碼標(biāo)準平臺的不足，

4、本文提出了一種基于四叉樹劃分的方式用于實現(xiàn)深度圖紋理圖之間的運動矢量繼承，減少了信息存儲冗余，提升了視頻編碼效率。實踐表明，我們提出的方法加入平臺標(biāo)準與未加入平臺標(biāo)準相比，取得較好的編碼性能。
　　2.提出了輔助視頻壓縮與分割的場景背景編碼方法
　　現(xiàn)今，3D-HEVC編碼標(biāo)準平臺HTM10.0采用的是多視點紋理視頻加深度的編碼格式。但是，多視點紋理視頻加深度格式編碼的序列是通過多個不同位置的攝像機同時對同一場景物體進行拍攝

5、得到的。因此，相鄰視點的紋理圖有大量重疊的背景信息，即存在嚴重的背景冗余。為了減少存在的背景冗余信息，本文提出基于3D-HEVC視頻編碼的輔助視頻壓縮和分割的場景背景合成編碼技術(shù)。也就是說，對每個視點進行視頻分割，分離前景和背景，根據(jù)相機參數(shù)以及各個視點相應(yīng)深度圖的關(guān)系，將所有視點的背景進行合成，消除了背景原有的冗余信息。合成的背景圖以及分離出來的三個前景圖替代多個視點本來的紋理圖進行編碼。與3D-HEVC原參考軟件HTM10.0相比較