基于多策略的流數(shù)據(jù)查詢優(yōu)化方法研究.pdf

1、隨著信息技術(shù)的發(fā)展，物聯(lián)網(wǎng)越來越多的應用到像智能交通、智能家居、智能醫(yī)療等的智能應用行業(yè)中，以傳感設備為基礎的各類流式數(shù)據(jù)的實時接收和處理成為物聯(lián)網(wǎng)智能應用的關(guān)鍵。
　　在智能交通應用中，實時采集的交通信息要進行有效的存儲，為交通信息服務、交通計算、交通管理等提供數(shù)據(jù)支持。面對大規(guī)模的、快速、實時、連續(xù)不間斷到達的流數(shù)據(jù)，如何實現(xiàn)大規(guī)模流式數(shù)據(jù)的存儲以及提供高效的數(shù)據(jù)查詢方法成為智能交通應用中不可避免的問題。針對這一問題，提出一種

2、適用于物聯(lián)網(wǎng)數(shù)據(jù)管理的結(jié)構(gòu)化數(shù)據(jù)查詢優(yōu)化方法，在保障流數(shù)據(jù)存儲的同時提供高效的數(shù)據(jù)查詢能力。該方法采用數(shù)據(jù)庫集群技術(shù)搭建主從數(shù)據(jù)庫環(huán)境;采用數(shù)據(jù)分區(qū)技術(shù)創(chuàng)建分區(qū)表用于數(shù)據(jù)存儲，實時接收的流數(shù)據(jù)連續(xù)不斷的寫入主數(shù)據(jù)庫;采用主從延遲復制策略通過定時增量復制技術(shù)將數(shù)據(jù)異步復制到從數(shù)據(jù)庫集群，為大規(guī)模歷史數(shù)據(jù)的查詢提供數(shù)據(jù)支持;采用數(shù)據(jù)緩存技術(shù)應對重復查詢時的性能需求。該方法采用的數(shù)據(jù)庫集群技術(shù)在應對數(shù)據(jù)并發(fā)訪問的同時減少數(shù)據(jù)查詢對數(shù)據(jù)寫入的性