分布式文件系統(tǒng)容錯(cuò)機(jī)制的研究與實(shí)現(xiàn).pdf

1、隨著互聯(lián)網(wǎng)在當(dāng)今時(shí)代的快速發(fā)展和信息技術(shù)的普及，人們處理的數(shù)據(jù)量正在成百上千的增加，海量數(shù)據(jù)的時(shí)代已經(jīng)悄然來臨。在以后的一段時(shí)間內(nèi)，單位企業(yè)所產(chǎn)生、應(yīng)用、存儲(chǔ)的數(shù)據(jù)量將逐漸增長，分布式文件系統(tǒng)的發(fā)展與應(yīng)用也會(huì)越來越普及。分布式文件系統(tǒng)是指被文件系統(tǒng)管理的物理存儲(chǔ)資源借助計(jì)算機(jī)網(wǎng)絡(luò)的手段存儲(chǔ)在其它節(jié)點(diǎn)上，而不一定直接存儲(chǔ)在本地節(jié)點(diǎn)上。在一般文件系統(tǒng)服務(wù)能力的基礎(chǔ)上額外增加了資源共享、高可用性、高可靠性和高存儲(chǔ)容量等優(yōu)點(diǎn)。其中分布式文件系統(tǒng)

2、的基本準(zhǔn)則是資源共，要達(dá)到這個(gè)基本原則，分布式文件系統(tǒng)必須以安全和可靠地方式共享數(shù)據(jù)。為了保證分布式文件系統(tǒng)的高可靠性和高可用性，發(fā)展分布式文件系統(tǒng)的容錯(cuò)技術(shù)是非常重要的。核心存儲(chǔ)系統(tǒng)是以實(shí)現(xiàn)文件系統(tǒng)的高容錯(cuò)性而設(shè)計(jì)的分布式文件系統(tǒng)。在該系統(tǒng)下的節(jié)點(diǎn)的組織形式為分布式的松耦合體系結(jié)構(gòu)，有良好的擴(kuò)展性。充分考慮了服務(wù)器和端系統(tǒng)之間的結(jié)合機(jī)制，系統(tǒng)的靈活性加強(qiáng)。同時(shí)系統(tǒng)的各個(gè)模塊之間獨(dú)立，假如某個(gè)模塊發(fā)生異常，在恢復(fù)過程中也不會(huì)干涉其他模塊

3、。
　　本研究主要內(nèi)容包括：⑴基于客戶端觸發(fā)的Lazy機(jī)制的容錯(cuò)設(shè)計(jì)，在本系統(tǒng)中由客戶端來發(fā)現(xiàn)客戶端緩存的規(guī)則與規(guī)則服務(wù)器上存儲(chǔ)的規(guī)則不一致，然后客戶端再去規(guī)則服務(wù)器上面去拉取規(guī)則，更新自身存儲(chǔ)的規(guī)則，使其客戶端緩存的規(guī)則與規(guī)則服務(wù)器上的規(guī)則一致。⑵元數(shù)據(jù)管理模塊的容錯(cuò)設(shè)計(jì)，主要是通過雙機(jī)熱備份機(jī)制來實(shí)現(xiàn)的。從機(jī)根據(jù)日志來復(fù)制數(shù)據(jù)和根據(jù) Mysql數(shù)據(jù)庫自帶的復(fù)制功能實(shí)現(xiàn)同步數(shù)據(jù)、主機(jī)與從機(jī)根據(jù)心跳機(jī)制互相監(jiān)控對(duì)方的運(yùn)行狀態(tài)和當(dāng)主