基于數(shù)據(jù)字典的關(guān)系數(shù)據(jù)庫和NOSQL集成的中間件設(shè)計.pdf

1、隨著Web2.0的快速發(fā)展尤其是高并發(fā)社交網(wǎng)絡(luò)的大規(guī)模應(yīng)用,傳統(tǒng)的關(guān)系數(shù)據(jù)庫在數(shù)據(jù)一致性方面的苛刻要求使得其在可用性、擴展性等方面出現(xiàn)了功能不足的情況,NOSQL數(shù)據(jù)庫的出現(xiàn)和使用彌補了關(guān)系數(shù)據(jù)庫的不足。NOSQL是not only SQL(Structure Query Language)的縮寫,是一類與關(guān)系數(shù)據(jù)庫管理系統(tǒng)完全不同的分布式服務(wù)系統(tǒng)的統(tǒng)稱,它們提倡運用非關(guān)系型的數(shù)據(jù)來進行存儲。NOSQL數(shù)據(jù)庫的存儲模型比較靈活,同時避免

2、表之間的連接操作,所以有利于數(shù)據(jù)的海量存儲。它們的服務(wù)器集群可以采用廉價的PC機,成本低并且支持水平擴展。NOSQL對于簡單查詢的效率非常高,但是對于復(fù)雜查詢一般不能很好的支持或者是查詢效率很低,而關(guān)系數(shù)據(jù)庫可以實現(xiàn)復(fù)雜查詢,因此關(guān)系數(shù)據(jù)庫和NOSQL均有各自的優(yōu)缺點。
　　本課題研究的目的在于為某互聯(lián)網(wǎng)公司的微博業(yè)務(wù)提供分布式的存儲服務(wù),該服務(wù)需要滿足海量數(shù)據(jù)的存儲和動態(tài)擴容,以及最大程度地降低成本。本文對NOSQL產(chǎn)品之一Ca

3、ssandra進行了研究,它是臉譜網(wǎng)公司開源的分布式存儲服務(wù)。將Cassandra和Oracle結(jié)合使用,作為該業(yè)務(wù)的數(shù)據(jù)存儲方式。
　　本文在對Cassandra數(shù)據(jù)庫系統(tǒng)研究的基礎(chǔ)上，給出采用中間件法來集成Cassandra和Oracle的軟件系統(tǒng)架構(gòu),并主要對中間件的數(shù)據(jù)字典模塊、SQL處理器模塊和結(jié)果集模塊進行設(shè)計和實現(xiàn)。數(shù)據(jù)字典模塊是完成中間件功能的基礎(chǔ),用于存儲數(shù)據(jù)庫的信息,包括路由信息、數(shù)據(jù)庫的表信息以及各種附加信息

4、。本文設(shè)計的數(shù)據(jù)字典包含各個表的表結(jié)構(gòu)、字段定義、約束條件以及表之間的關(guān)系和獲取方式等。SQL處理器模塊和結(jié)果集模塊是中間件的重要組成部分,它的設(shè)計實現(xiàn)使得中間件可以正確解析SQL請求并且能夠返回正確的結(jié)果集給應(yīng)用。
　　本文設(shè)計的數(shù)據(jù)字典模塊、SQL處理器模塊和結(jié)果集模塊三個模塊的實現(xiàn)滿足了對數(shù)據(jù)庫最基本的增刪改查的需求,為實現(xiàn)Cassandra與Oracle的集成打下基礎(chǔ),后期業(yè)務(wù)需求的增加可以在這幾個模塊上進行擴展。本文的設(shè)