基于擁塞發(fā)現(xiàn)的強(qiáng)化學(xué)習(xí)P2P網(wǎng)絡(luò)視頻點(diǎn)播預(yù)取策略研究.pdf

1、視頻點(diǎn)播(Video On Demand)是一種交互式視頻播放與傳輸系統(tǒng)，可以滿足用戶根據(jù)自身需求任意觀看視頻節(jié)目。將P2P技術(shù)與視頻點(diǎn)播技術(shù)相融合，可以充分利用節(jié)點(diǎn)的計(jì)算和存儲(chǔ)能力來(lái)減輕服務(wù)器的壓力，但也存在用戶觀看視頻時(shí)緩沖等待時(shí)間過(guò)長(zhǎng)等問(wèn)題。因此研究采用視頻預(yù)取策略，即將需要播放的數(shù)據(jù)事先獲取并保存在本地，可以有效地減少用戶視頻點(diǎn)播中的緩沖等待時(shí)間，保證了視頻播放的流暢性。
　　本文提出了一種基于擁塞發(fā)現(xiàn)的強(qiáng)化學(xué)習(xí)P2P網(wǎng)絡(luò)

2、視頻點(diǎn)播預(yù)取策略，通過(guò)減少對(duì)網(wǎng)絡(luò)擁塞節(jié)點(diǎn)的視頻內(nèi)容預(yù)取，從而能夠有效的控制節(jié)點(diǎn)的負(fù)載，避免網(wǎng)絡(luò)視頻播放時(shí)發(fā)生擁塞，減少用戶觀看視頻的等待時(shí)間，提高視頻播放的流暢性。實(shí)驗(yàn)結(jié)果驗(yàn)證該方法能提高視頻播放流暢性，避免用戶在節(jié)點(diǎn)發(fā)生擁塞時(shí)等待時(shí)間過(guò)長(zhǎng)，提高視頻播放效率。
　　基于以上研究?jī)?nèi)容，本文的主要工作如下:
　　首先，介紹了P2P技術(shù)及強(qiáng)化學(xué)習(xí)技術(shù)的相關(guān)概念，闡述了目前的強(qiáng)化學(xué)習(xí)算法。
　　其次，提出了一種基于擁塞發(fā)現(xiàn)的強(qiáng)

3、化學(xué)習(xí)網(wǎng)絡(luò)均衡查詢方法，該方法中節(jié)點(diǎn)周期性重連，將具有相同資源的節(jié)點(diǎn)組成一個(gè)群組，并使更多的查詢消息向處理能力強(qiáng)的節(jié)點(diǎn)發(fā)送。同時(shí)通過(guò)監(jiān)測(cè)節(jié)點(diǎn)的狀態(tài)，特別是節(jié)點(diǎn)的擁塞狀況等參數(shù)，并采用Q-learning算法綜合評(píng)估網(wǎng)絡(luò)節(jié)點(diǎn)，有目的引導(dǎo)節(jié)點(diǎn)消息的轉(zhuǎn)發(fā)，從而減少了對(duì)網(wǎng)絡(luò)擁塞節(jié)點(diǎn)的查詢消息的轉(zhuǎn)發(fā)次數(shù)。實(shí)驗(yàn)證明，本文方法能夠有效的降低查詢擁塞數(shù)量。
　　最后，進(jìn)一步提出了基于擁塞發(fā)現(xiàn)的強(qiáng)化學(xué)習(xí)P2P網(wǎng)絡(luò)視頻點(diǎn)播預(yù)取策略，將基于擁塞控制的強(qiáng)