高性能網(wǎng)絡(luò)流量控制系統(tǒng)的研究與設(shè)計.pdf

1、互聯(lián)網(wǎng)技術(shù)的發(fā)展使得網(wǎng)絡(luò)成了一種新的傳媒載體，而媒體的急速增長又給互聯(lián)網(wǎng)帶來了很大沖擊。尤其是網(wǎng)絡(luò)視頻、個人媒體、傳統(tǒng)電視等媒體向互聯(lián)網(wǎng)的滲入使得網(wǎng)絡(luò)中的流量急劇上升，這使得運營商的運營和管理成本大幅度增長。運營商可以采用限流的方法來控制網(wǎng)絡(luò)流量，但這同時也限制了網(wǎng)絡(luò)媒體的發(fā)展，最終不利于互聯(lián)網(wǎng)的進(jìn)一步發(fā)展。于是開發(fā)一種新的技術(shù)來控制網(wǎng)絡(luò)流量成了一個研究熱點。 目前，互聯(lián)網(wǎng)上的流量主要由P2P和HTTP產(chǎn)生，據(jù)估計這兩種流量已經(jīng)

2、占到全部流量的70％以上，并且仍然呈現(xiàn)出上升趨勢。因此流量控制的重點是P2P和HTTP，降低這兩種協(xié)議產(chǎn)生的流量將有效降低網(wǎng)絡(luò)整體流量。本文介紹的流量控制系統(tǒng)即是專門針對P2P和HTTP開發(fā)的一套系統(tǒng)。將系統(tǒng)部署在網(wǎng)絡(luò)出口來緩存P2P和HTTP流量，對同一資源的后續(xù)請求將由緩存來響應(yīng)，從而降低網(wǎng)絡(luò)流量、節(jié)省帶寬并提高用戶體驗。 系統(tǒng)基于Linux平臺，采用設(shè)計模式的技術(shù)進(jìn)行設(shè)計。由于系統(tǒng)部署在運營商的網(wǎng)絡(luò)出口，所以會面臨很大的服

3、務(wù)壓力，因此高性能是系統(tǒng)的關(guān)鍵需求。設(shè)計系統(tǒng)時采用了若干措施來提高性能。首先是并發(fā)度，由于系統(tǒng)會在短時間內(nèi)收到大量請求，而傳統(tǒng)的一個連接一個線程的模式并不能應(yīng)付這種高并發(fā)的情況。為此系統(tǒng)采用了反應(yīng)器的模式，該模式基于Linux2.6內(nèi)核的Epoll調(diào)用，因此系統(tǒng)的并發(fā)度就只受操作系統(tǒng)中文件描述符數(shù)的限制(理論值為65536)。其次是磁盤I/O，在系統(tǒng)中磁盤I/O是一個熱點，系統(tǒng)采用了線程池模式來提高磁盤的吞吐能力。該模式將磁盤I/O和通