國(guó)家稅務(wù)總局?jǐn)?shù)據(jù)治理平臺(tái)的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、隨著大數(shù)據(jù)時(shí)代的到來(lái)，大數(shù)據(jù)、云計(jì)算由于其技術(shù)的先進(jìn)性，越來(lái)越被企事業(yè)單位所重視，因此，搭建自己的大數(shù)據(jù)云平臺(tái)也成為了各企事業(yè)單位的首選。國(guó)稅總局為了充分利用大數(shù)據(jù)的數(shù)據(jù)分析能力和云計(jì)算的資源共享能力，而搭建了總局自己的大數(shù)據(jù)云平臺(tái)，并在該平臺(tái)上開(kāi)發(fā)了大數(shù)據(jù)分析系統(tǒng)。由于該系統(tǒng)要處理的數(shù)據(jù)量過(guò)于龐大，并且數(shù)據(jù)資源種類繁多，所以，急需建設(shè)數(shù)據(jù)治理平臺(tái)來(lái)對(duì)這些數(shù)據(jù)進(jìn)行管理工作，因此，數(shù)據(jù)治理平臺(tái)的設(shè)計(jì)與實(shí)現(xiàn)被提上了工作日程。
　　數(shù)據(jù)

2、治理平臺(tái)主要包括三個(gè)應(yīng)用功能和一個(gè)數(shù)據(jù)服務(wù)功能。數(shù)據(jù)服務(wù)功能由元數(shù)據(jù)采集與服務(wù)功能模塊組成，主要是在運(yùn)行在后臺(tái)，做數(shù)據(jù)加工、處理的工作。三個(gè)應(yīng)用功能包括數(shù)據(jù)資產(chǎn)管理功能模塊、數(shù)據(jù)安全管理功能模塊、數(shù)據(jù)質(zhì)量管理功能模塊。數(shù)據(jù)資產(chǎn)管理功能模塊是對(duì)大數(shù)據(jù)分析系統(tǒng)中的數(shù)據(jù)資源進(jìn)行管理并展示，同時(shí)也對(duì)大數(shù)據(jù)分析系統(tǒng)的數(shù)據(jù)加工情況進(jìn)行監(jiān)控的模塊。數(shù)據(jù)安全管理功能模塊是對(duì)大數(shù)據(jù)分析系統(tǒng)的數(shù)據(jù)進(jìn)行安全方面的管理，包括對(duì)敏感數(shù)據(jù)進(jìn)行安全級(jí)別定義和監(jiān)控應(yīng)用

3、功能訪問(wèn)記錄等安全相關(guān)的管理工作。數(shù)據(jù)質(zhì)量管理功能模塊是對(duì)大數(shù)據(jù)分析系統(tǒng)的數(shù)據(jù)加工過(guò)程中，可能出現(xiàn)的數(shù)據(jù)質(zhì)量方面的問(wèn)題，例如數(shù)據(jù)加工口徑與應(yīng)用口徑不一致，數(shù)據(jù)加工質(zhì)量低等問(wèn)題，進(jìn)行監(jiān)控和管理的功能模塊。由三個(gè)應(yīng)用功能和一個(gè)數(shù)據(jù)服務(wù)功能構(gòu)成的數(shù)據(jù)治理平臺(tái)，和大數(shù)據(jù)分析系統(tǒng)是相輔相成、互利共生一樣的關(guān)系。數(shù)據(jù)治理平臺(tái)從技術(shù)上對(duì)大數(shù)據(jù)分析系統(tǒng)進(jìn)行監(jiān)控和管理，同時(shí)也減輕了用戶對(duì)于數(shù)據(jù)治理工作的勞動(dòng)強(qiáng)度。
　　本課題重點(diǎn)對(duì)數(shù)據(jù)治理平臺(tái)建設(shè)過(guò)

4、程中的系統(tǒng)需求確定，各項(xiàng)技術(shù)的選擇和系統(tǒng)的實(shí)現(xiàn)進(jìn)行了全方位的闡述和總結(jié)。本課題在需求分析和系統(tǒng)概要設(shè)計(jì)階段，采用面向?qū)ο蟮乃枷?，結(jié)合各種系統(tǒng)和網(wǎng)絡(luò)架構(gòu)，對(duì)數(shù)據(jù)治理平臺(tái)進(jìn)行設(shè)計(jì)。在系統(tǒng)詳細(xì)設(shè)計(jì)階段根據(jù)相關(guān)業(yè)務(wù)來(lái)設(shè)計(jì)系統(tǒng)應(yīng)用功能，并根據(jù)相關(guān)應(yīng)用功能進(jìn)行數(shù)據(jù)庫(kù)的設(shè)計(jì)工作。在系統(tǒng)開(kāi)發(fā)階段，采用JavaEE和MySQL數(shù)據(jù)庫(kù)等技術(shù)，利用統(tǒng)一研發(fā)規(guī)范準(zhǔn)則開(kāi)展軟件開(kāi)發(fā)工作，保障了系統(tǒng)代碼的統(tǒng)一性、可讀性、易擴(kuò)展性和可維護(hù)性。在系統(tǒng)的測(cè)試階段，依據(jù)各項(xiàng)