移動(dòng)手持終端的音視頻會(huì)話技術(shù).pdf

1、近年來，隨著計(jì)算機(jī)技術(shù)、多媒體技術(shù)及網(wǎng)絡(luò)技術(shù)的快速發(fā)展，音視頻會(huì)話系統(tǒng)正在向嵌入式、數(shù)字化和網(wǎng)絡(luò)化的方向發(fā)展。隨著移動(dòng)網(wǎng)絡(luò)的高速發(fā)展，在移動(dòng)終端上實(shí)現(xiàn)音視頻會(huì)話功能，越來越普及。本文目的是將嵌入式技術(shù)和移動(dòng)網(wǎng)絡(luò)技術(shù)相結(jié)合，構(gòu)建一個(gè)性能穩(wěn)定且具有較強(qiáng)實(shí)時(shí)功能的音視頻會(huì)話系統(tǒng)。
　　 本文首先介紹了音視頻會(huì)話技術(shù)研究的國(guó)內(nèi)外現(xiàn)狀，針對(duì)移動(dòng)終端的會(huì)話系統(tǒng)的特性，選擇了三星公司的ARM系列處理器S3C6410和必要的外圍設(shè)備構(gòu)成系統(tǒng)的硬

2、件平臺(tái)。文章研究的重點(diǎn)集中在音視頻會(huì)話的軟件實(shí)現(xiàn)，按照音視頻會(huì)話的流程，分塊完成。
　　 在采集方面，視頻采集過程中首先認(rèn)真分析了V4L2驅(qū)動(dòng)的特性及編程方法，結(jié)合系統(tǒng)中采用的CMOS攝像頭的特性，完成了視頻數(shù)據(jù)的采集；同理，在音頻采集過程中，運(yùn)用了OSS音頻驅(qū)動(dòng)，完成音頻數(shù)據(jù)的采集。
　　 在編解碼方面，首先介紹了音視頻編解碼的目的和重要性。分析當(dāng)前主流的編解碼方法，結(jié)合系統(tǒng)的自身特性，選擇采用H.264的視頻編解碼和

3、G.729的音頻編解碼。由于S3C6410本身內(nèi)嵌了一個(gè)多媒體處理硬件模塊，能夠?qū)崿F(xiàn)H.264的硬件編解碼，極大的提高了視頻編解碼的速度。而在音頻方面，在ARM平臺(tái)上移植了G.729編解碼算法。
　　 在音視頻傳輸方面，首先分析了TCP協(xié)議和UDP協(xié)議，得出TCP協(xié)議并不適合用于來傳輸實(shí)時(shí)數(shù)據(jù)，而UDP協(xié)議傳輸具有不可靠等特點(diǎn)，會(huì)給實(shí)時(shí)數(shù)據(jù)的傳輸帶來數(shù)據(jù)包的失序、丟包等問題。為了更好的實(shí)現(xiàn)多媒體數(shù)據(jù)的傳輸，必須在UDP傳輸?shù)幕A(chǔ)