基于Android的音視頻實(shí)時(shí)傳輸系統(tǒng)的研究與設(shè)計(jì).pdf

1、近年來，隨著移動(dòng)多媒體和3G、4G技術(shù)的快速發(fā)展，基于智能手機(jī)的多媒體交互得到廣泛關(guān)注。與傳統(tǒng)的音視頻通信相比，部署于智能系統(tǒng)的音視頻軟件將得到更大的應(yīng)用，具有更高的實(shí)時(shí)性。但現(xiàn)有移動(dòng)多媒體音視頻通信系統(tǒng)操作界面不夠人性化，操作太過繁瑣。本文主要針對(duì)現(xiàn)有移動(dòng)多媒體音視頻通信系統(tǒng)中的不足，研究和設(shè)計(jì)了一款基于Android的實(shí)時(shí)音視頻通信軟件，其主要目的是實(shí)現(xiàn)實(shí)時(shí)的音視頻通信，并且適合目前智慧社區(qū)中龐大的中老年人群的使用，界面可操作性強(qiáng)。

2、本文的主要工作和成果如下：
　　(1)分析了基于Android的實(shí)時(shí)音視頻通信的主要技術(shù)和協(xié)議，并設(shè)計(jì)了基于Android的實(shí)時(shí)音視頻通信系統(tǒng)的總體框架。針對(duì)流媒體的傳輸特點(diǎn)和Android NDK和Java JNI技術(shù)，移植FFmpeg多媒體庫中的H.264技術(shù)到Android平臺(tái)進(jìn)行視頻的編解碼處理。
　　(2)移植開源庫Jlibrtp和Mjsip，實(shí)現(xiàn)軟件的信令交互和音視頻的RTP實(shí)時(shí)傳輸，并研究了RTP協(xié)議、SIP協(xié)

3、議在Android中的程序?qū)崿F(xiàn)。根據(jù)功能需求對(duì)各個(gè)模塊進(jìn)行設(shè)計(jì)并實(shí)現(xiàn)。
　　(3)針對(duì)視頻過程中出現(xiàn)的抖動(dòng)現(xiàn)象，本文改進(jìn)傳統(tǒng)的單一的去抖動(dòng)算法，結(jié)合RANSAC算法和SIFT算法。采用SIFT進(jìn)行關(guān)鍵點(diǎn)的檢測，生成特征描述子，進(jìn)行SIFT特征點(diǎn)匹配；然后采取 RANSAC算法去除誤匹配點(diǎn)，進(jìn)行運(yùn)動(dòng)估計(jì)；并采用高斯濾波去除高頻抖動(dòng)；最后采用雙線性插值法進(jìn)行圖像的補(bǔ)償，提高視頻的質(zhì)量。在建立抖動(dòng)模型過程中，針對(duì)傳統(tǒng)建模時(shí)復(fù)雜度和精確性