深度視頻及視頻預(yù)處理技術(shù)【文獻綜述】

1、畢業(yè)設(shè)計文獻綜述畢業(yè)設(shè)計文獻綜述電子信息科學(xué)與技術(shù)電子信息科學(xué)與技術(shù)深度視頻及視頻預(yù)處理技術(shù)深度視頻及視頻預(yù)處理技術(shù)摘要：多視點視頻具有任意切換視點的特點，但由于稀疏的相機序列無法獲得各個角度的視點，這就需要利用深度圖來合成虛擬視點。對象深度值是多視點視頻的重要技術(shù)參量?；谏疃刃畔⒃谔摂M視點生成上的重要地位。本文主要介紹了深度圖的特性，深度視頻預(yù)處理的幾種方法。關(guān)鍵詞：多視點視頻；深度圖；預(yù)處理1、背景背景1.11.1多視點視頻多視點

2、視頻多視點視頻(Multi—ViewVideo)是一種新型的具有立體感和交互操作功能的視頻[14]，它通過多個視點的視頻數(shù)據(jù)滿足用戶從多個角度選擇和操作視聽對象，提供了場景漫游的交互能力。多視點視頻信號是由一組平行、會聚或任意角度的相機陣列拍攝得到的視頻信號。能提供拍攝場景不同角度的視頻信息利，用其中的一個或多個視點信息可以合成任意視點的信息，達到自由切換任意視點的目的。為了滿足多視點視頻達到自由切換任意視點的目的，使用戶可以切換到原本

3、場景中并不存在的視點，我們必須通過獲取深度圖來繪制產(chǎn)生虛擬視點。隨著相機數(shù)目的增加，多視點視頻的數(shù)據(jù)量也成倍增加[5]，同樣，所需傳輸?shù)纳疃刃畔⒘恳苍黾?。因此需要研究有效的深度圖像壓縮方法，以緩解帶寬壓力。系統(tǒng)的一個挑戰(zhàn)就是研究實現(xiàn)一種高效的多路編碼傳輸機制，從而對數(shù)據(jù)進行高效地壓縮以便存儲和傳輸視頻序列。1.21.2深度圖的特性深度圖的特性深度圖獲取主要有兩種方式：1）通過深度相機獲??；2）通過視差估計得到視差圖，進而轉(zhuǎn)換得到深度圖。

4、通過深度相機來獲取深度圖，由于價格等因素，現(xiàn)階段無法商用化。因此，降低深度相機的成本是這方面努力的主要方向。通過深度估計算法來得到深度圖，目前仍然存在著計算量大、效果達不到應(yīng)用要求等問題，因此，需要提出一個滿足應(yīng)用需求的深度估計算法。另外，目前的深度估計算法僅適用于一維相機情況，因此，需要考慮不同的相機配置情況下，深度估計的問題?，F(xiàn)階段MPEG組織的主要目光就是集中在深度獲取上。深度圖的特性應(yīng)該從兩個方面來討論：（1）理論上深度圖的特性

5、；（2）現(xiàn)有深度圖的特性。深度圖與彩色圖像相比具有紋理簡單的特點。它只在對象邊界處產(chǎn)生深度圖值的跳變，而在對象內(nèi)部以及背景部分保持平坦。對于相機固定的序列，背景的深度值應(yīng)該保證不變。深度圖的時空相關(guān)性要大于彩色圖像的時空相關(guān)性。因此，采用H.264壓縮標(biāo)準(zhǔn)壓縮深度圖和彩色圖像時，深度圖的3.1.1鄰域平均法鄰域平均法是簡單的空域處理方法。這種方法的基本思想是用幾個像素灰度的平均值來代替每個像素的灰度。鄰域平均法的空域思想使得算法的思想簡

6、單、清晰；處理結(jié)果表明，鄰域平均算法對抑制噪聲是有效的。但是，隨著鄰域的增大，圖像的模糊程度也愈加嚴(yán)重。為克服這一缺點，可以采用閾值法減少由于鄰域平均所產(chǎn)生的模糊效應(yīng)。3.1.2低通濾波法這種方法是一種頻域處理法。在分析圖像信號的頻率特性時，一幅圖像的邊緣、跳躍部分以及顆粒噪聲代表圖像信號的高頻分量，而大面積的背景區(qū)則代表圖像信號的低頻分量。用濾波的方法濾除其高頻部分就能去掉噪聲，使圖像得到平滑[12][13]。3.1.3多圖像平均法如

7、果一幅圖像包含有加性噪聲，這些噪聲對于每個坐標(biāo)點是不相關(guān)的，并且其平均值為零，在這種情況下就可能采用多圖像平均法來達到去掉噪聲的目的。多圖像平均法是把一系列有噪聲的圖像｛gj(x，y)｝迭加起來，然后再取平均值以達到平滑的目的[14][15]。以上這些方法在不同程度上增強了去噪效果，但也帶來了運算復(fù)雜、適用面窄等缺點。因而我們在選擇消除噪聲方法時，必須綜合考慮各種因素，選擇最適合的平滑方法。四、總結(jié)四、總結(jié)對象深度值是多視點視頻的重要技

8、術(shù)參量?；谏疃刃畔⒃谔摂M視點生成上的重要地位，有關(guān)深度信息的研究必將是熱門領(lǐng)域。本文介紹的幾種深度視頻預(yù)處理方法，以及深度多視點視頻編碼方法都有各自不同的優(yōu)缺點。本人將在下一階段的工作中針對各方法的優(yōu)缺點，選擇或設(shè)計一種適合本課題的實現(xiàn)方法，完成課題任務(wù)主要參考文獻：主要參考文獻：[1]彭宗舉郁梅蔣剛毅等.一種多視點視頻編碼的宏塊模式快速選擇新算法[J].高技術(shù)通訊200818(3):253258.[2]畢厚杰.新一代視頻壓縮編碼標(biāo)準(zhǔn)

9、—H.264AVC[M].北京:人民郵電出版社2005.[3]朱仲杰郁梅蔣剛毅.用于立體視頻會議系統(tǒng)的立體對象分割和跟蹤算法[J].計算機輔助設(shè)計與圖形學(xué)報2004:16(3):1620.[4]張云.多視點視頻信號的先進編碼研究[D].寧波大學(xué)2007.[5]蔣剛毅張云郁梅.基于相關(guān)性分析的多模式多視點視頻編碼[J].計算機學(xué)報200730(12):22052211.[6]OhHHoYS.H.264BasedDepthMapSequen