大規(guī)模時間序列數(shù)據(jù)存儲系統(tǒng)的研究與實現(xiàn).pdf

1、時間序列數(shù)據(jù),即一段時間內(nèi)以固定的時間間隔采集的數(shù)據(jù)點的序列,已成為生產(chǎn)生活中重要的信息記錄形式。RRDtool是當今被廣泛使用的一種存儲時間序列數(shù)據(jù)的數(shù)據(jù)庫工具,但是基于RRDtool構(gòu)建的時間序列數(shù)據(jù)存儲系統(tǒng)在處理大規(guī)模數(shù)據(jù)業(yè)務(wù)時I/O負荷較重,單位時間內(nèi)能夠處理的RRD文件數(shù)量不能滿足需求等問題;同時,數(shù)據(jù)量的迅速增長要求存儲系統(tǒng)的容量具有較好的擴展性,特別是能夠在不影響系統(tǒng)在線工作的情況下調(diào)整存儲容量;另一方面,考慮到系統(tǒng)可能發(fā)

2、生異?；虿糠质転?zāi),需要一種在這些情況下能保證系統(tǒng)可用性的存儲方案。
　　針對上述問題,本文研究并實現(xiàn)了一種面向大規(guī)模時間序列數(shù)據(jù)的存儲系統(tǒng)。構(gòu)建該系統(tǒng)的關(guān)鍵部分是mem-RRD和MooseFS,前者是對RRDtool的改進實現(xiàn),I/O性能更好;后者是一種分布式文件系統(tǒng),可以保證存儲系統(tǒng)的可用性和擴展性。
　　本文首先介紹了一種命名為mem-RRD的基于用戶空間緩沖的RRDtool改進方案的設(shè)計和實現(xiàn)過程;然后給出利用mem-