實(shí)時(shí)流媒體系統(tǒng)中音視頻同步的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、進(jìn)入21世紀(jì)，伴隨著經(jīng)濟(jì)的高速發(fā)展，整個(gè)社會(huì)的不安定因素逐漸累積，人們的安全意識(shí)也是逐漸加強(qiáng)。而計(jì)算機(jī)技術(shù)、高壓縮比的數(shù)據(jù)壓縮技術(shù)以及寬帶通信技術(shù)的發(fā)展，為安防等實(shí)時(shí)流媒體系統(tǒng)應(yīng)用領(lǐng)域的發(fā)展帶來(lái)了新的增長(zhǎng)點(diǎn)。隨著應(yīng)用的多樣化，單一的視頻監(jiān)控顯得有些單調(diào)，己逐漸滿足不了客戶的需求，無(wú)論是銀行、鐵路、客運(yùn)站，都需要優(yōu)質(zhì)的音視頻監(jiān)控系統(tǒng)提供較全面的安防服務(wù)。由于網(wǎng)絡(luò)傳輸?shù)牟豢煽啃裕瑢?dǎo)致本應(yīng)保持同步關(guān)系的數(shù)據(jù)，到達(dá)信宿端時(shí)己失去了其固有的時(shí)間關(guān)

2、聯(lián)性，即失去了同步，因此音視頻的同步性能就成為了實(shí)時(shí)流媒體系統(tǒng)中的一個(gè)聚焦熱點(diǎn)。
　　為此，本文就實(shí)時(shí)流媒體系統(tǒng)中音視頻媒體流的同步問(wèn)題做了探究。設(shè)計(jì)并實(shí)現(xiàn)一個(gè)簡(jiǎn)易的實(shí)時(shí)流媒體系統(tǒng)，該系統(tǒng)包括信源端、流媒體服務(wù)器、信宿端三部分。針對(duì)音視頻數(shù)據(jù)在傳輸過(guò)程中產(chǎn)生異步的情況，設(shè)計(jì)了一個(gè)基于RTP/RTCP協(xié)議的網(wǎng)絡(luò)自適應(yīng)控制的實(shí)時(shí)流媒體同步方案。該方案從信源端、信宿端、網(wǎng)絡(luò)狀況三方面入手對(duì)音視頻實(shí)施同步控制。在信源端實(shí)現(xiàn)了音視頻數(shù)據(jù)的同

3、步采集、編碼;音視頻數(shù)據(jù)在發(fā)送前通過(guò)打上時(shí)間戳，實(shí)現(xiàn)不同媒體映射到同一條時(shí)間軸。在信宿端，第一步是對(duì)收到的音視頻包進(jìn)行同步預(yù)處理，消除時(shí)延抖動(dòng)導(dǎo)致的亂序。然后分別對(duì)音頻進(jìn)行解壓，對(duì)視頻進(jìn)行組幀。最終依據(jù)時(shí)間戳值對(duì)音視頻數(shù)據(jù)實(shí)施同步控制。在網(wǎng)絡(luò)狀況的自適應(yīng)方面，信宿端統(tǒng)計(jì)網(wǎng)絡(luò)延時(shí)抖動(dòng)與丟包，一方面依據(jù)統(tǒng)計(jì)信息調(diào)節(jié)信宿端緩存和播放速率，另一方面將統(tǒng)計(jì)信息反饋給信源端。信源端再依據(jù)接收的信息調(diào)節(jié)視頻壓縮率，實(shí)現(xiàn)發(fā)送端的碼率調(diào)節(jié)。
　　最