分布式文件系統(tǒng)的研究.pdf

1、隨著社會的發(fā)展,越來越多的信息被數(shù)據(jù)化,尤其是伴隨著Internet的發(fā)展,信息呈爆炸式增長,如何存儲和管理這些數(shù)據(jù)化的信息就成為人們關(guān)注的焦點。七、八十年代,這些數(shù)據(jù)都被存放在昂貴的中小型機中,由管理員定期維護;但這樣開銷較大,又容易出錯。近年來,隨著硬件技術(shù)的迅猛發(fā)展、寬帶網(wǎng)絡(luò)的逐漸成熟、開放源碼的廣泛興起、以及對分布式系統(tǒng)的深入研究,出現(xiàn)了一批以Linux為基礎(chǔ)的分布式服務(wù)器系統(tǒng)來存儲和管理這些數(shù)據(jù);這些服務(wù)器系統(tǒng)由多臺高性能的P

2、C服務(wù)器通過高速局域網(wǎng)連接而成,在分布式并行操作系統(tǒng)的統(tǒng)一管理下運行,以支持高可靠、高性能、以及大并發(fā)流的應(yīng)用需求。本文所研究的分布式并行文件系統(tǒng)DPFS(Distributed&Parallel File System)是分布式并行服務(wù)器的核心,用于動態(tài)地管理分布式并行服務(wù)器群中的文件資源,以使系統(tǒng)的性能達到最優(yōu);與基于客戶機/服務(wù)器模式的分布式文件系統(tǒng)不同,在Linux內(nèi)核的基礎(chǔ)上開發(fā)的DPFS是面向服務(wù)器群的分布式文件系統(tǒng)。首先,

3、概述數(shù)據(jù)存儲的發(fā)展?fàn)顩r與新的需求、分布式文件系統(tǒng)對其發(fā)展的重要影響以及設(shè)計分布式文件系統(tǒng)需要考慮的各種因素;其次,討論為滿足分布式并行服務(wù)器的功能需求DPFS應(yīng)達到的設(shè)計目標(biāo);再次,闡述DPFS設(shè)計的總體邏輯結(jié)構(gòu)、副本表模塊以及副本一致性,分析DPFS對系統(tǒng)可靠性的影響以及比較DPFS與EXT3的讀寫性能;最后,展望分布式并行文件系統(tǒng)未來的發(fā)展方向。重點討論了副本表的設(shè)計,即記錄副本信息的副本表的實現(xiàn),包括物理結(jié)構(gòu)、邏輯機構(gòu)、緩存機制以