某商業(yè)銀行歷史數(shù)據(jù)歸檔系統(tǒng)的分析與設(shè)計(jì).pdf

1、大數(shù)據(jù)時(shí)代已經(jīng)悄然來(lái)臨，在信息經(jīng)濟(jì)和互聯(lián)網(wǎng)金融沖擊下，在金融媒介多元化競(jìng)爭(zhēng)中，商業(yè)銀行作為數(shù)據(jù)密集型行業(yè)，將在更廣領(lǐng)域和更深層次獲得并使用涉及客戶(hù)方方面面的更加全面、完整、系統(tǒng)的數(shù)據(jù)，并增強(qiáng)對(duì)海量數(shù)據(jù)的搜集和分析萃取能力，挖掘分析得到過(guò)去不可能獲得的信息和無(wú)法企及的商機(jī)。由此，商業(yè)銀行的IT系統(tǒng)建設(shè)將迎來(lái)新的規(guī)劃和變革，其中，歷史數(shù)據(jù)歸檔系統(tǒng)作為全行各種內(nèi)部數(shù)據(jù)和外部數(shù)據(jù)的長(zhǎng)期歷史周期的集中點(diǎn)，更是在商業(yè)銀行大數(shù)據(jù)應(yīng)用變革中占有重要的一

2、席之地，如何將來(lái)自多渠道多系統(tǒng)的數(shù)據(jù)原貌及長(zhǎng)期保存，除了支持歷史數(shù)據(jù)的在線(xiàn)使用，并據(jù)此快速支持大數(shù)據(jù)分析應(yīng)用，是商業(yè)銀行歷史數(shù)據(jù)歸檔系統(tǒng)建設(shè)的新方向。
　　在此背景下，論文結(jié)合某大型商業(yè)銀行的歷史數(shù)據(jù)管理系統(tǒng)現(xiàn)狀，對(duì)以支持大數(shù)據(jù)分析應(yīng)用為方向的歷史數(shù)據(jù)平臺(tái)進(jìn)行深入研究。通過(guò)數(shù)據(jù)采集、數(shù)據(jù)歸檔、數(shù)據(jù)查詢(xún)使用、數(shù)據(jù)銷(xiāo)毀等信息生命周期管理，建立全行歷史數(shù)據(jù)集中存儲(chǔ)、管理、使用的歷史數(shù)據(jù)歸檔系統(tǒng)，構(gòu)建全行統(tǒng)一的歷史數(shù)據(jù)管理辦法和使用流程，

3、采用平臺(tái)化開(kāi)放的運(yùn)作方式來(lái)支撐全行各個(gè)系統(tǒng)進(jìn)行歷史數(shù)據(jù)應(yīng)用的搭建。技術(shù)上，采用Hadoop分布式框架，主要包括了HDFS、MapReduce、HBase等項(xiàng)目，實(shí)現(xiàn)基于海量數(shù)據(jù)的高速存儲(chǔ)和查詢(xún)，作為大數(shù)據(jù)分析應(yīng)用的基礎(chǔ)框架。本文以軟件工程思想為主線(xiàn)，從需求分析、總體設(shè)計(jì)、模塊詳細(xì)設(shè)計(jì)等方面，詳細(xì)介紹了實(shí)施過(guò)程，提出了歷史數(shù)據(jù)歸檔系統(tǒng)的解決方案。
　　系統(tǒng)主要的功能有:原始數(shù)據(jù)的統(tǒng)一接入、檢核、歸檔;建立數(shù)據(jù)資產(chǎn)以及元數(shù)據(jù)管理;制定