基于動(dòng)態(tài)連接池的數(shù)據(jù)集成中間件的研究與實(shí)現(xiàn).pdf

1、隨著計(jì)算機(jī)技術(shù)的迅猛發(fā)展，大多數(shù)企事業(yè)單位都逐步實(shí)現(xiàn)了與業(yè)務(wù)相關(guān)的管理信息系統(tǒng)。這些系統(tǒng)在開(kāi)發(fā)時(shí)往往沒(méi)有考慮和其他系統(tǒng)的交互，并且由于開(kāi)發(fā)時(shí)期不同、所用技術(shù)不同等原因，使得這些系統(tǒng)中的信息和數(shù)據(jù)是孤立的、相互隔離的，同時(shí)在存儲(chǔ)方式、訪問(wèn)方式等方面也存在很大的差異，因而這些系統(tǒng)間很難實(shí)現(xiàn)數(shù)據(jù)共享。隨著企事業(yè)單位信息化建設(shè)的開(kāi)展，現(xiàn)在的企事業(yè)單位比以往任何時(shí)候都需要實(shí)現(xiàn)數(shù)據(jù)集成，不僅現(xiàn)有系統(tǒng)間的數(shù)據(jù)需要集成，而且以后開(kāi)發(fā)的新系統(tǒng)的數(shù)據(jù)也需要

2、集成，因此迫切需要數(shù)據(jù)集成系統(tǒng)，以實(shí)現(xiàn)新系統(tǒng)或舊系統(tǒng)之間的數(shù)據(jù)共享與交換。在研制數(shù)據(jù)集成系統(tǒng)時(shí)，首先碰到的難題是數(shù)據(jù)庫(kù)的異構(gòu)問(wèn)題，其次是數(shù)據(jù)集成的效率問(wèn)題。如何提高數(shù)據(jù)集成系統(tǒng)的異構(gòu)性和效率，成為當(dāng)前數(shù)據(jù)集成領(lǐng)域研究的熱點(diǎn)，也是實(shí)際應(yīng)用迫切需要解決的問(wèn)題。 現(xiàn)有的數(shù)據(jù)集成系統(tǒng)可以歸納為虛擬集成系統(tǒng)和實(shí)體化集成系統(tǒng)。虛擬集成系統(tǒng)一般使用XML 和中間件技術(shù)構(gòu)造虛擬全局模式，對(duì)每次查詢都要訪問(wèn)底層數(shù)據(jù)源，所以能夠?qū)崿F(xiàn)數(shù)據(jù)源的完全異構(gòu)

3、并且保證數(shù)據(jù)一致性，但效率問(wèn)題是該類系統(tǒng)的瓶頸。實(shí)體化集成系統(tǒng)一般使用數(shù)據(jù)復(fù)制技術(shù)，可以直接在中心數(shù)據(jù)庫(kù)上實(shí)現(xiàn)查詢，所以能夠提高數(shù)據(jù)訪問(wèn)效率，但在實(shí)現(xiàn)完全異構(gòu)性和數(shù)據(jù)一致性方面有所欠缺。為了突破以上兩種方案各自的局限性，人們開(kāi)始研究如何將這兩種方案結(jié)合起來(lái)使用，也就是綜合集成方案，但這方面的研究還比較少，一般注重于整體模型的設(shè)計(jì)與復(fù)制路徑的選擇，沒(méi)有考慮具體實(shí)現(xiàn)。 在分析現(xiàn)有數(shù)據(jù)集成系統(tǒng)優(yōu)勢(shì)與劣勢(shì)的基礎(chǔ)上，將異構(gòu)問(wèn)題與效率問(wèn)題結(jié)

4、合在一起考慮，設(shè)計(jì)并實(shí)現(xiàn)了一個(gè)基于動(dòng)態(tài)連接池的數(shù)據(jù)集成中間件。該中間件是一種綜合集成方案，將虛擬集成系統(tǒng)和實(shí)體化集成系統(tǒng)的優(yōu)勢(shì)有機(jī)結(jié)合在一起，并應(yīng)用數(shù)據(jù)庫(kù)連接池技術(shù)，使系統(tǒng)不僅可以實(shí)現(xiàn)數(shù)據(jù)源的完全異構(gòu)，還可以獲得比較高的數(shù)據(jù)訪問(wèn)性能。 主要研究工作如下： 1、研究數(shù)據(jù)庫(kù)連接池技術(shù)，并在現(xiàn)有的數(shù)據(jù)庫(kù)連接池基礎(chǔ)上，設(shè)計(jì)了動(dòng)態(tài)數(shù)據(jù)庫(kù)連接池模型。動(dòng)態(tài)連接池可以在運(yùn)行中動(dòng)態(tài)加載、修改、刪除連接池，而且能在運(yùn)行中監(jiān)控連接池的運(yùn)行狀態(tài)

5、，自動(dòng)調(diào)整相關(guān)參數(shù)及連接對(duì)象，以使連接池運(yùn)行性能達(dá)到最優(yōu)。 2、使用JavaBean 技術(shù)實(shí)現(xiàn)動(dòng)態(tài)數(shù)據(jù)庫(kù)連接池，并將其集成到web 應(yīng)用服務(wù)器，實(shí)現(xiàn)基于瀏覽器的可視化工具，以方便用戶遠(yuǎn)程管理連接池。 3、在現(xiàn)有異構(gòu)數(shù)據(jù)庫(kù)復(fù)制技術(shù)的基礎(chǔ)上，設(shè)計(jì)一種基于中間數(shù)據(jù)庫(kù)和變化日志表的異構(gòu)數(shù)據(jù)復(fù)制模式。該模式為每個(gè)源數(shù)據(jù)庫(kù)建立一個(gè)變化日志表，對(duì)源數(shù)據(jù)庫(kù)的性能影響較??；在中間數(shù)據(jù)庫(kù)中存放發(fā)布表與訂閱表的映射信息，將中間件數(shù)據(jù)庫(kù)作為數(shù)據(jù)

6、集成中心，存放用戶常用的數(shù)據(jù)，以簡(jiǎn)化流程和組織，從根本上預(yù)防復(fù)制沖突的發(fā)生，并且給用戶提供比較高的數(shù)據(jù)查詢效率；以訂閱表為導(dǎo)向，實(shí)現(xiàn)單表、視圖、用戶自定義多表連接、虛擬字段等對(duì)象的復(fù)制，從而擴(kuò)展現(xiàn)有復(fù)制工具的功能。 4、以虛擬訂閱表的方式構(gòu)建全局查詢模式。該模式提供全局SQL 作為統(tǒng)一查詢語(yǔ)言，而不是Xquery，使用戶可以簡(jiǎn)單、透明地訪問(wèn)全局?jǐn)?shù)據(jù)，滿足全局?jǐn)?shù)據(jù)信息共享的要求，保證數(shù)據(jù)的一致性和準(zhǔn)確性，方便全局應(yīng)用的開(kāi)發(fā)。

7、 5、在動(dòng)態(tài)連接池基礎(chǔ)上擴(kuò)展復(fù)制組件和查詢轉(zhuǎn)換組件，提出一個(gè)基于動(dòng)態(tài)連接池的數(shù)據(jù)集成中間件模型。復(fù)制組件實(shí)現(xiàn)了本文所設(shè)計(jì)的復(fù)制模式，查詢轉(zhuǎn)換組件用于實(shí)現(xiàn)本文設(shè)計(jì)的全局查詢模式，兩者結(jié)合以實(shí)現(xiàn)完全異構(gòu)數(shù)據(jù)源的高效集成。 6、在動(dòng)態(tài)連接池基礎(chǔ)上，采用Java 組件技術(shù)實(shí)現(xiàn)上述數(shù)據(jù)集成中間件模型的業(yè)務(wù)邏輯，并且使用JSP 頁(yè)面實(shí)現(xiàn)該中間件的圖形化操作界面。 7、將基于動(dòng)態(tài)連接池的數(shù)據(jù)集成中間件應(yīng)用到廣西師范大學(xué)財(cái)務(wù)管理信息系