版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
1、互聯(lián)網(wǎng)的快速發(fā)展對(duì)交易系統(tǒng)的要求越來(lái)越高,低延遲和高可用性已經(jīng)成為衡量一個(gè)交易系統(tǒng)的重要指標(biāo)。交易系統(tǒng)不僅需要滿足數(shù)據(jù)的一致性和完整性,而且還要考慮交易延遲對(duì)用戶體驗(yàn)的重要影響。同時(shí),交易系統(tǒng)對(duì)數(shù)據(jù)的實(shí)時(shí)分析也是 IT廠商關(guān)注的重點(diǎn)問(wèn)題。如何對(duì)海量的結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)做實(shí)時(shí)分析,如何保證交易數(shù)據(jù)的穩(wěn)定性,是大數(shù)據(jù)時(shí)代的共同挑戰(zhàn)。
本文先介紹交易系統(tǒng)延遲相關(guān)的各個(gè)技術(shù):網(wǎng)絡(luò)技術(shù)、聯(lián)機(jī)事務(wù)處理系統(tǒng)和聯(lián)機(jī)分析處理系統(tǒng)。網(wǎng)絡(luò)技術(shù)
2、中重點(diǎn)對(duì)比了萬(wàn)兆以太網(wǎng)和 Infiniband,萬(wàn)兆以太網(wǎng)是應(yīng)用于高層網(wǎng)絡(luò)通信(比如TCP/IP)的技術(shù),傳輸距離很遠(yuǎn),而InfiniBand傳輸距離很近,是用于底層輸入/輸出通信的技術(shù),可用來(lái)提高服務(wù)器端輸入/輸出的性能。交易系統(tǒng)是典型的聯(lián)機(jī)事務(wù)處理系統(tǒng),聯(lián)機(jī)事務(wù)處理系統(tǒng)也稱為實(shí)時(shí)系統(tǒng),因?yàn)樗闹匾攸c(diǎn)就是快速響應(yīng)客戶請(qǐng)求,即實(shí)時(shí)性高。響應(yīng)時(shí)間就是衡量一個(gè)聯(lián)機(jī)事務(wù)處理系統(tǒng)的重要指標(biāo)。交易產(chǎn)生的數(shù)據(jù)處理,是基于一個(gè)分布式系統(tǒng)上的數(shù)據(jù)管理
3、技術(shù),也稱為聯(lián)系分析處理技術(shù),在云計(jì)算和大數(shù)據(jù)快速發(fā)展的今天,Hadoop成為主流的框架平臺(tái)。而Google在2010年發(fā)布新的信息查詢技術(shù)Dremel,可以實(shí)現(xiàn)3秒內(nèi)查詢1PB數(shù)據(jù)。
針對(duì)實(shí)時(shí)交易系統(tǒng)和實(shí)時(shí)數(shù)據(jù)處理系統(tǒng),本文設(shè)計(jì)了整體的系統(tǒng)框架,并針對(duì)各個(gè)模塊進(jìn)行了詳細(xì)的介紹。在實(shí)時(shí)交易系統(tǒng)中,重點(diǎn)解決系統(tǒng)的低延遲和容錯(cuò)能力,提出了基于Paxos算法的內(nèi)存復(fù)制解決方案。在實(shí)時(shí)數(shù)據(jù)處理系統(tǒng)中,運(yùn)用Hadoop架構(gòu)技術(shù)進(jìn)行部署,
4、Hadoop是一個(gè)在大型集群設(shè)備上部署分布式系統(tǒng)的應(yīng)用框架,由 HDFS和MapReduce兩部分組成;同時(shí)介紹了最新的數(shù)據(jù)處理技術(shù)Dremel,可對(duì)存儲(chǔ)在HDFS內(nèi)和MapReduce產(chǎn)生的結(jié)果集進(jìn)行處理。系統(tǒng)整體部署中用到的核心技術(shù)有Paxos算法,Hadoop架構(gòu)技術(shù)和Dremel數(shù)據(jù)處理技術(shù)。由于Hadoop架構(gòu)技術(shù)比較成熟,只對(duì)其做了簡(jiǎn)單的闡述,Dremel數(shù)據(jù)處理技術(shù)中,詳細(xì)地介紹了它的工作原理和優(yōu)勢(shì)。重點(diǎn)介紹核心的Paxo
溫馨提示
- 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 眾賞文庫(kù)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 基于多框架的黃金交易系統(tǒng)的研究與實(shí)現(xiàn).pdf
- 基于strutsspring框架的食品交易系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)
- 證券集中交易系統(tǒng)框架設(shè)計(jì)與實(shí)現(xiàn).pdf
- 基于Blend框架的期貨交易系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf
- 圖片交易系統(tǒng)的架構(gòu)研究和實(shí)現(xiàn).pdf
- 基于OFBiz框架的期貨交易系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn).pdf
- 基于web技術(shù)的圖書交易系統(tǒng)研究與實(shí)現(xiàn)
- 電力交易系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf
- 電子實(shí)時(shí)交易系統(tǒng)的研究和實(shí)現(xiàn).pdf
- 模擬基金交易系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf
- 應(yīng)用Solver技術(shù)的金融咨詢交易系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn).pdf
- 糧油電子交易系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf
- 具有負(fù)載均衡特性的容錯(cuò)復(fù)制技術(shù)研究與實(shí)現(xiàn).pdf
- 基于Thinkphp框架的校園二手圖書交易系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf
- 大集中交易系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf
- 手機(jī)機(jī)票交易系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf
- 校園舊物交易系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf
- 航材交易系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf
- 證券公司集中交易系統(tǒng)的研究與實(shí)現(xiàn).pdf
- 日內(nèi)短線交易系統(tǒng)和趨勢(shì)交易系統(tǒng)
評(píng)論
0/150
提交評(píng)論