機(jī)載環(huán)境下移動(dòng)視頻拼接的研究與實(shí)現(xiàn).pdf

1、視頻拼接(Video Stitching)技術(shù)是將多路具有重疊區(qū)域的圖像經(jīng)過特征提取，圖像配準(zhǔn)、透視變換、圖像融合等步驟合成大視場(chǎng)圖像序列的技術(shù)。在UAV多相機(jī)拍攝場(chǎng)景中，視頻拼接可以將多路幀圖像融合成一幀圖像進(jìn)行處理，減少了傳輸過程的數(shù)據(jù)量，降低了圖像處理系統(tǒng)的復(fù)雜度。傳統(tǒng)的視頻拼接算法存在著計(jì)算復(fù)雜度高，魯棒性差，輸出視頻抖動(dòng)等問題。針對(duì)這些問題，本文進(jìn)行了如下的研究：
　?。?）本文使用幀間特征匹配與幀間光流跟蹤相結(jié)合的圖像

2、配準(zhǔn)算法，該算法僅對(duì)關(guān)鍵幀進(jìn)行特征匹配與圖像配準(zhǔn)，其余幀序列使用光流跟蹤算法計(jì)算幀間運(yùn)動(dòng)參數(shù)。這種匹配跟蹤有機(jī)結(jié)合的圖像配準(zhǔn)算法充分利用了圖像序列信息，減少了配準(zhǔn)的時(shí)間開銷。
　?。?）傳統(tǒng)P-KLT(Pyramid Kanade Lucas Tomasi Tracking)光流跟蹤算法對(duì)幀間小運(yùn)動(dòng)具有較好的跟蹤效果，對(duì)于存在運(yùn)動(dòng)模糊的幀序列跟蹤失敗比例增大，算法的魯棒性較差。本文通過研究 P-KLT中的層間光流矢量的傳遞過程，結(jié)

3、合圖像局部區(qū)域的光流一致性，在P-KLT算法的層間建立單應(yīng)性約束模型對(duì)層間光流傳遞矢量進(jìn)行幾何約束，降低了層間光流矢量的傳遞誤差，增強(qiáng)了算法的跟蹤精度和魯棒性。
　?。?）針對(duì)拼接輸出視頻存在抖動(dòng)這個(gè)問題，本文將視頻拼接算法和視頻穩(wěn)像算法進(jìn)行結(jié)合。通過對(duì)拼接輸出視頻圖像進(jìn)行幀間的運(yùn)動(dòng)估計(jì)，參數(shù)平滑，運(yùn)動(dòng)補(bǔ)償?shù)确€(wěn)像操作，得到平滑穩(wěn)定的拼接結(jié)果。
　　（4）本文的穩(wěn)像算法利用視頻拼接算法中的幀間單應(yīng)性模型進(jìn)行穩(wěn)像，避免冗余計(jì)算。