網(wǎng)絡(luò)文件的分布式存儲(chǔ)設(shè)計(jì)與實(shí)現(xiàn).pdf

1、隨著信息網(wǎng)絡(luò)和互聯(lián)網(wǎng)技術(shù)的快速發(fā)展，人們的生活越來越智能化，每天撲面而來的都是大量的互聯(lián)網(wǎng)信息，個(gè)人數(shù)據(jù)正爆炸式地增長，因此對(duì)個(gè)人數(shù)據(jù)存儲(chǔ)提出了要求，而傳統(tǒng)存儲(chǔ)技術(shù)存在的開放性不足、建設(shè)成本高、擴(kuò)展性差等問題已難以滿足存儲(chǔ)需求，所以云計(jì)算的興起為云存儲(chǔ)的發(fā)展帶來了契機(jī)，即可將數(shù)據(jù)移到云端存儲(chǔ)，智能終端無需大量存儲(chǔ)空間，用戶可隨時(shí)隨地通過互聯(lián)網(wǎng)登錄個(gè)人云存儲(chǔ)空間存取個(gè)人數(shù)據(jù)資源，可以說云存儲(chǔ)的發(fā)展正顛覆著現(xiàn)有的網(wǎng)絡(luò)存儲(chǔ)架構(gòu)。
　　本

2、文正是針對(duì)多媒體瘦客戶端用戶的數(shù)據(jù)存儲(chǔ)需求這一場景，提出了網(wǎng)絡(luò)文件的分布式存儲(chǔ)方案，設(shè)計(jì)實(shí)現(xiàn)了基于MooseFS的分布式網(wǎng)絡(luò)文件存儲(chǔ)系統(tǒng)，并構(gòu)建了基于動(dòng)態(tài)副本機(jī)制和節(jié)點(diǎn)容量感知機(jī)制的網(wǎng)絡(luò)文件分布式存儲(chǔ)模型，為終端用戶提供安全透明的分布式文件存儲(chǔ)。
　　首先，根據(jù)云端存儲(chǔ)的需求，設(shè)計(jì)了B/S架構(gòu)的網(wǎng)絡(luò)磁盤應(yīng)用，為每個(gè)用戶在云端開辟一份私人存儲(chǔ)空間，用戶可以進(jìn)行文件的上傳、下載等管理操作，由此將用戶的存儲(chǔ)空間移到云端，并為用戶提供了訪

3、問云端空間的Web可視化入口。
　　其次，為滿足用戶數(shù)據(jù)的存儲(chǔ)需求，以及提高存儲(chǔ)可靠性，設(shè)法將網(wǎng)絡(luò)磁盤文件的存儲(chǔ)分布式化。方案一是利用開源的分布式文件系統(tǒng)，本論文采用的是MooseFS，即通過構(gòu)建MooseFS分布式集群，并將網(wǎng)絡(luò)磁盤存儲(chǔ)空間掛載到該系統(tǒng)中，以實(shí)現(xiàn)文件的透明化分布式存儲(chǔ);方案二是設(shè)計(jì)并構(gòu)建專門針對(duì)網(wǎng)絡(luò)磁盤小文件分布式存儲(chǔ)的模型，利用JNotify進(jìn)行目錄實(shí)時(shí)監(jiān)控，并設(shè)計(jì)動(dòng)態(tài)副本機(jī)制，利用聚類算法，將文件副本數(shù)與用戶

4、使用頻率設(shè)置為正相關(guān)，以平衡存儲(chǔ)可靠性和資源利用率;設(shè)計(jì)節(jié)點(diǎn)容量感知機(jī)制，利用改進(jìn)的一致性哈希算法將節(jié)點(diǎn)資源可用率與實(shí)際負(fù)載率設(shè)置為正相關(guān)，以提高節(jié)點(diǎn)存儲(chǔ)空間利用率。同時(shí)，為了實(shí)現(xiàn)模型數(shù)據(jù)監(jiān)控可視化，利用MVC模型設(shè)計(jì)了簡易后臺(tái)管理界面，以實(shí)現(xiàn)對(duì)用戶登錄次數(shù)、副本數(shù)、集群存儲(chǔ)容量等的實(shí)時(shí)查看，方便對(duì)模型的管理。
　　本論文針對(duì)多媒體瘦客戶端等設(shè)備存儲(chǔ)空間有限與用戶數(shù)據(jù)存儲(chǔ)需求之間的矛盾，通過設(shè)計(jì)網(wǎng)絡(luò)磁盤，并將其與分布式文件系統(tǒng)結(jié)合