實時數(shù)據(jù)庫中數(shù)據(jù)壓縮算法的設(shè)計與實現(xiàn).pdf

1、實時數(shù)據(jù)庫技術(shù)主要包括兩個方面的內(nèi)容，分別是實時系統(tǒng)和數(shù)據(jù)庫技術(shù)。工業(yè)生產(chǎn)產(chǎn)生的大量數(shù)據(jù)利用數(shù)據(jù)庫進行保存，形成了實時數(shù)據(jù)庫。目前無論在工業(yè)生產(chǎn)領(lǐng)域還是在物聯(lián)網(wǎng)平臺構(gòu)建中，實時數(shù)據(jù)庫由于高實時性、大吞吐量等特點，受到廣泛的關(guān)注。然而，由于實時系統(tǒng)往往在短時間內(nèi)產(chǎn)生大量數(shù)據(jù)，因此在實時數(shù)據(jù)庫中要保存的數(shù)據(jù)量非常巨大，給數(shù)據(jù)的存儲、傳輸、應(yīng)用都造成了較大的困難。
　　為了解決這一問題，將數(shù)據(jù)壓縮技術(shù)引入實時數(shù)據(jù)庫的數(shù)據(jù)處理過程，目的是

2、為了提高數(shù)據(jù)庫的容量，并保證數(shù)據(jù)使用的高效性。主要工作包括：
　　1、針對傳統(tǒng)有損數(shù)據(jù)壓縮算法無法應(yīng)用于高精度實時數(shù)據(jù)庫的問題，提出了基于不同類型數(shù)據(jù)采用不同數(shù)據(jù)壓縮算法的解決方案，實現(xiàn)了高精度的數(shù)據(jù)壓縮，解決了數(shù)據(jù)精度和數(shù)據(jù)庫存儲容量之間的矛盾，在實際的應(yīng)用過程中取得了良好的效果。
　　2、通過對大量歷史數(shù)據(jù)的分析，將實時數(shù)據(jù)庫中保存的數(shù)據(jù)劃分為三種類型，分別是數(shù)值型數(shù)據(jù)、時間型數(shù)據(jù)、代碼型數(shù)據(jù)，針對時間型數(shù)據(jù)和代碼型數(shù)據(jù)

3、的，由于其冗余度極高，所以采用RLE算法對其進行壓縮，可以取得良好的效果，而對于數(shù)值型數(shù)據(jù)，又將其分為布爾型數(shù)據(jù)、百分量型數(shù)據(jù)、浮點型數(shù)據(jù)，對于布爾型采用按位存儲的方式，對于百分量型數(shù)據(jù)采用LZW算法和LZ78算法相結(jié)合的方式進行處理，提高了壓縮效率，對于浮點型數(shù)據(jù)采用改進的LZW算法進行處理，通過對數(shù)據(jù)預(yù)處理和設(shè)定模型等方法，解決了浮點型數(shù)據(jù)壓縮率低的問題。
　　3、以數(shù)據(jù)壓縮技術(shù)在實時數(shù)據(jù)庫中的應(yīng)用為中心，以實現(xiàn)實時數(shù)據(jù)無損壓

4、縮為目的，首先對實時數(shù)據(jù)庫技術(shù)和數(shù)據(jù)壓縮技術(shù)分別進行了討論，然后分析了目前常用的數(shù)據(jù)壓縮算法流程和原理，闡述其優(yōu)缺點以及適用的范圍，再以現(xiàn)有的數(shù)據(jù)壓縮算法為基礎(chǔ)，通過對歷史實時數(shù)據(jù)的分類分析，詳細(xì)討論了應(yīng)用于實時數(shù)據(jù)壓縮算法的設(shè)計方案，最后利用編程語言實現(xiàn)了壓縮算法，并通過測試驗證了算法在壓縮率和壓縮時間方面相對于其它壓縮算法的優(yōu)勢。
　　實時數(shù)據(jù)庫技術(shù)在工業(yè)領(lǐng)域中的應(yīng)用越來越廣泛，目前對于大數(shù)據(jù)的挖掘研究是熱點領(lǐng)域，因此對于數(shù)據(jù)