基于管控一體化的數(shù)據(jù)采集與數(shù)據(jù)遷移技術(shù)的研究與實(shí)現(xiàn).pdf

1、由于流程工業(yè)的業(yè)務(wù)復(fù)雜,地域分散,導(dǎo)致不同區(qū)域、不同業(yè)務(wù)產(chǎn)生大量的結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化圖形、文檔等數(shù)據(jù),對流程工業(yè)整體進(jìn)行綜合信息管理提出了挑戰(zhàn)。
　　同時(shí)RTDB(Real-time database,實(shí)時(shí)數(shù)據(jù)庫)是對流程工業(yè)現(xiàn)場進(jìn)行信息監(jiān)控的關(guān)鍵,由于RTDB存儲了海量的數(shù)據(jù),且是非關(guān)系型的數(shù)據(jù)存儲方式,在數(shù)據(jù)信息采集和數(shù)據(jù)處理等各方面給基于實(shí)時(shí)數(shù)據(jù)庫的工業(yè)管理信息系統(tǒng)的開發(fā)帶來了很大的不便。
　　為了將流程工業(yè)現(xiàn)場分散

2、的異構(gòu)數(shù)據(jù)集成到企業(yè)綜合MIS(Management Information System,管理信息系統(tǒng))中,需要建立一個(gè)通用的數(shù)據(jù)管理平臺,數(shù)據(jù)遷移便成為數(shù)據(jù)采集和管理的核心和難點(diǎn)。本文以此為背景,以建立一個(gè)通用的數(shù)據(jù)中心為思路,開發(fā)一套實(shí)用的數(shù)據(jù)遷移自動(dòng)化工具。
　　論文采用了MVC(Model-View-Controller,模型-視圖-控制器)軟件架構(gòu)模式,對開發(fā)過程中遇到的多數(shù)據(jù)庫數(shù)據(jù)類型映射、數(shù)據(jù)轉(zhuǎn)換規(guī)則、大數(shù)據(jù)字段處

3、理以及數(shù)據(jù)遷移實(shí)現(xiàn)方法等進(jìn)行了重點(diǎn)描述,在技術(shù)方面主要運(yùn)用了遷移任務(wù)的定義和獲取、異構(gòu)數(shù)據(jù)轉(zhuǎn)換、函數(shù)動(dòng)態(tài)加載技術(shù)、渠道中間件技術(shù)以及遷移質(zhì)量控制等,并通過“緩存隊(duì)列”技術(shù)實(shí)現(xiàn)了對實(shí)時(shí)數(shù)據(jù)的定時(shí)轉(zhuǎn)換與遷移,保證了對工業(yè)現(xiàn)場各類異構(gòu)數(shù)據(jù)的獲取、映射、處理、傳輸和遷移的一體化。
　　本文最終為用戶構(gòu)建了一個(gè)可視化的數(shù)據(jù)交換與數(shù)據(jù)集成的遷移平臺,用戶可以自己管理遷移操作,給流程工業(yè)MIS的開發(fā)帶來了很大的方便,為工業(yè)數(shù)據(jù)的綜合分析提供了很