一種通用分布式異構(gòu)數(shù)據(jù)同步系統(tǒng)設(shè)計與實現(xiàn).pdf

1、大型集團型企業(yè)的數(shù)據(jù)往往分布在各個異構(gòu)環(huán)境中，但業(yè)務(wù)需求又要求企業(yè)進行數(shù)據(jù)的交換和同步，分布異構(gòu)數(shù)據(jù)集成是企業(yè)業(yè)務(wù)與服務(wù)整合的關(guān)鍵支撐技術(shù)。由于應(yīng)用平臺和數(shù)據(jù)模式各不相同，傳統(tǒng)數(shù)據(jù)同步方式多針對每一種數(shù)據(jù)同步模式開發(fā)一種系統(tǒng)，缺乏統(tǒng)一的數(shù)據(jù)同步框架。針對這一問題，論文設(shè)計實現(xiàn)一種通用的數(shù)據(jù)同步框架。
　　論文主要介紹一種分布式異構(gòu)數(shù)據(jù)同步系統(tǒng)JTangSync的設(shè)計與實現(xiàn)方案。系統(tǒng)采用分布式架構(gòu)，每個節(jié)點由數(shù)據(jù)源模塊、數(shù)據(jù)傳輸模塊

2、、處理器模塊等組織而成，數(shù)據(jù)源模塊負責(zé)提取數(shù)據(jù)，數(shù)據(jù)傳輸模塊主要負責(zé)數(shù)據(jù)的高效傳輸，處理器模塊負責(zé)數(shù)據(jù)的處理。更重要的是每個模塊均設(shè)計為可替換插件形式，方便進行二次擴展。各個節(jié)點依賴zookeeper組成集群，實現(xiàn)了分布式資源的集中管理和故障轉(zhuǎn)移、斷點續(xù)傳等分布式功能。
　　與現(xiàn)有數(shù)據(jù)庫同步系統(tǒng)相比，JTangSync系統(tǒng)內(nèi)置多種異構(gòu)數(shù)據(jù)庫數(shù)據(jù)源，支持復(fù)雜異構(gòu)數(shù)據(jù)庫同步;支持用戶開發(fā)和定制自己的數(shù)據(jù)源和數(shù)據(jù)處理程序，方便進行二次開