基于二次打包糾錯的數據庫同步機制研究.pdf

1、隨著信息化技術的發(fā)展，網絡環(huán)境的普及，目前在企事業(yè)單位信息工程的建設過程中，越來越重視信息資源共享、數據交換等需求，但是由于各部門間地理上存在分布廣泛、數據庫形式復雜多樣，表現出很大的異構性，因此如何實現異構數據庫之間高效、安全、準確的數據同步，是現代企業(yè)應用系統(tǒng)中亟待解決的重要問題之一。
　　 目前，廣泛應用于商業(yè)中的數據庫同步方案主要分為兩大類型：(一)大型數據庫廠商在其同構數據庫的同步產品基礎上，提出自己的異構數據庫同步方

2、案；(二)一些ISV開發(fā)的大量具有異構數據庫同步功能的數據庫同步中間件，并獲得市場普遍認同。但是商業(yè)異構數據庫同步產品存在一定的封閉性，代碼不公開，標準不統(tǒng)一，各種產品之間很難做到互連互通互操作；而學術界已有方案在效率上、通用性、開放性及對同步失敗問題的解決上存在不足。為解決上述問題，本文設計并實現了基于二次打包糾錯的數據庫同步機制。主要工作包括：
　　 ⑴提出基于變更軌跡表與事務相結合的數據庫變更數據捕獲技術，確保數據操作信息

3、與數據變更軌跡信息的一致性，同時變更軌跡表運行效率較高，占用存儲空間較小，易于管理。
　　 ⑵利用XML的易于擴展、與平臺無關、交互性好、語義性強、可格式化等優(yōu)點，進行變更數據信息的封裝和解析，實現異構數據庫之間的數據同步。
　　 ⑶使用消息隊列中間件技術進行數據傳輸，確保數據包傳輸的順序性，提高數據傳輸的安全性。
　　 ⑷結合優(yōu)先級與時間戳技術解決數據沖突問題。通過人工定義各節(jié)點或各個操作人員的優(yōu)先級，進行沖突

4、數據的取舍，具有靈活、便捷的優(yōu)點；當優(yōu)先級相同時結合時間戳進行數據修改時間的判斷，提高最終結果數據的準確性。
　　 ⑸提出二次打包糾錯方法。針對對賬檢測功能監(jiān)控到的數據同步失敗，將同步失敗的數據包采用二次打包方法后，重新補發(fā)。解決在數據庫同步過程中，發(fā)生意外故障導致數據包丟失、解包失敗等錯誤，發(fā)送端與接收端數據不一致的問題。通過二次打包糾錯方法處理，發(fā)送端與接收端的數據庫最終得到干凈、一致的數據，避免出現“臟數據”。