三維視頻的視點(diǎn)繪制與編碼.pdf

1、近年來(lái)，多視點(diǎn)+深度的三維視頻表示格式正在逐漸取代傳統(tǒng)的雙目立體視頻表示格式，并被廣泛應(yīng)用于新一代的三維視頻系統(tǒng)?；诙嘁朁c(diǎn)+深度的三維視頻系統(tǒng)通過(guò)視點(diǎn)繪制技術(shù)由給定視點(diǎn)的紋理圖像和深度圖像生成新的視點(diǎn)信息，從而構(gòu)成多視點(diǎn)立體顯示。本文針對(duì)多視點(diǎn)+深度的三維視頻系統(tǒng)，以如何有效提升繪制視點(diǎn)視頻質(zhì)量為研究主線，重點(diǎn)研究了視點(diǎn)繪制和多視點(diǎn)+深度的視頻編碼問(wèn)題。本文的主要?jiǎng)?chuàng)新性研究成果包括:
　　提出了面向最小化空洞效應(yīng)的深度圖像增強(qiáng)算

2、法。本文首先分析了基于深度圖像的多視點(diǎn)重建過(guò)程，歸納了視點(diǎn)重建過(guò)程空洞產(chǎn)生的原因，并以此為依據(jù)對(duì)空洞類(lèi)型進(jìn)行了分類(lèi)。針對(duì)離散分布的空洞像素，采用自適應(yīng)濾波器對(duì)深度圖像進(jìn)行處理，以增強(qiáng)深度圖像的質(zhì)量;針對(duì)連續(xù)的遮蔽區(qū)域，應(yīng)用方向性的圖像填補(bǔ)算法對(duì)遮蔽區(qū)域進(jìn)行填補(bǔ)。實(shí)驗(yàn)表明此方案在提升重建視點(diǎn)視頻主觀視覺(jué)質(zhì)量方面具有明顯的效果。
　　提出了結(jié)合時(shí)間相關(guān)性信息的多視點(diǎn)繪制視頻增強(qiáng)方案。本文利用時(shí)域相關(guān)信息填補(bǔ)重建視點(diǎn)中的遮蔽區(qū)域，其中時(shí)

3、域相關(guān)信息的選取充分考慮了場(chǎng)景內(nèi)前景目標(biāo)的運(yùn)動(dòng)模式。同時(shí)，針對(duì)場(chǎng)景內(nèi)可能存在的復(fù)雜運(yùn)動(dòng)模式，本文利用前景深度相關(guān)原則恢復(fù)被運(yùn)動(dòng)目標(biāo)遮擋的背景信息。實(shí)驗(yàn)表明本方案有效提升了重建視點(diǎn)的主、客觀質(zhì)量。
　　提出了深度視頻優(yōu)化采樣算法和率失真優(yōu)化編碼方案。針對(duì)尺度非對(duì)稱(chēng)三維視頻編碼框架下的深度視頻采樣問(wèn)題，本文以最小化合成視點(diǎn)失真為目標(biāo)，設(shè)計(jì)了深度視頻優(yōu)化采樣方案;針對(duì)三維視頻編碼率失真問(wèn)題，優(yōu)化了尺度非對(duì)稱(chēng)視頻編碼的率失真方案。率失真優(yōu)