JTangSpider：一種高性能Oracle數(shù)據(jù)庫同步平臺(tái)設(shè)計(jì)與實(shí)現(xiàn).pdf

1、近年來，越來越多的企業(yè)將服務(wù)接入互聯(lián)網(wǎng)，服務(wù)模式呈現(xiàn)出跨地域、跨領(lǐng)域和規(guī)?；目缃缣卣?。如此一來，分布式數(shù)據(jù)庫系統(tǒng)便成了企業(yè)提供優(yōu)質(zhì)跨界服務(wù)的基礎(chǔ)，那么企業(yè)就將面臨著整合異地?cái)?shù)據(jù)庫、集成異構(gòu)數(shù)據(jù)庫、同步實(shí)時(shí)數(shù)據(jù)等挑戰(zhàn)。論文針對(duì)這一產(chǎn)業(yè)需求，提出了一種針對(duì)Oracle的高性能數(shù)據(jù)庫同步平臺(tái)架構(gòu)模型，該模型包括增量數(shù)據(jù)提取、數(shù)據(jù)緩存與處理、同步映射與消息路由和多租戶控制臺(tái)四部分，其具有跨Oracle版本、高穩(wěn)定性、高擴(kuò)展性等特征。
　

2、　針對(duì)傳統(tǒng)數(shù)據(jù)庫同步中間件不能兼容多種Oracle版本的問題，論文實(shí)現(xiàn)了跨版本增量數(shù)據(jù)檢測(cè)功能，該功能支持觸發(fā)器監(jiān)控、LogMiner日志解析、CDC(Change Data Capture)本地監(jiān)控和CDC遠(yuǎn)程日志解析四種方式，監(jiān)控模塊能夠根據(jù)數(shù)據(jù)庫版本和同步場(chǎng)景自動(dòng)適配最合適的監(jiān)控方法。
　　針對(duì)傳統(tǒng)數(shù)據(jù)庫同步中間件錯(cuò)誤恢復(fù)能力較差、數(shù)據(jù)處理邏輯不能定制化和數(shù)據(jù)處理能力不能擴(kuò)展的問題，論文提出了數(shù)據(jù)二級(jí)緩存模式和數(shù)據(jù)處理器責(zé)任

3、鏈模式，設(shè)計(jì)了自適應(yīng)調(diào)節(jié)系統(tǒng)和數(shù)據(jù)恢復(fù)系統(tǒng)。
　　針對(duì)數(shù)據(jù)庫同步映射模式多樣化，網(wǎng)絡(luò)環(huán)境不確定的問題，論文設(shè)計(jì)了同步映射管理器和消息路由。同步映射管理器將同步映射分為一對(duì)一、一對(duì)多和多對(duì)一這三種模式，極大地降低了同步映射管理難度;消息路由為用戶提供性能可擴(kuò)展的數(shù)據(jù)路由服務(wù)。
　　針對(duì)多租戶數(shù)據(jù)存儲(chǔ)中數(shù)據(jù)共享和數(shù)據(jù)隔離矛盾，數(shù)據(jù)安全難以保證，服務(wù)節(jié)點(diǎn)負(fù)載不均衡的問題，論文以數(shù)據(jù)訪問為中心，提出了角色分級(jí)管理機(jī)制和多租戶數(shù)據(jù)分類