面向海量數(shù)據(jù)的分布式文件系統(tǒng)設計和實現(xiàn).pdf

1、隨著信息時代的快速發(fā)展，整個世界的數(shù)據(jù)的容量也是爆炸式增長。一方面，海量數(shù)據(jù)使得我們擁有巨大的信息來源。另一方面，存儲和分析海量數(shù)據(jù)是個很困難的問題。針對這個問題，Google公司提出它們的解決方案:這就是Google文件系統(tǒng)和Map/Reduce編程模型。Google文件系統(tǒng)用于存儲海量數(shù)據(jù)，Map/Reduce編程模型用于分析海量數(shù)據(jù)。本文主要關注海量數(shù)據(jù)的存儲和管理。
　　 通過對比和分析各種分布式文件系統(tǒng)，本文設計和實現(xiàn)

2、了面向海量數(shù)據(jù)存儲和管理的分布式文件系統(tǒng)。系統(tǒng)名為KiddenFS。
　　 本文第一部分主要對KiddenFS進行分析和設計，首先對KiddenFS的功能性需求和非功能性需求進行了分析，然后針對分布式文件系統(tǒng)邏輯結構、數(shù)據(jù)存儲方式、負載均衡方式等等給出了詳細的分析，并提出了在KiddenFS中的解決方案。最后在此基礎之上設計了KiddenFS的架構，并描述了系統(tǒng)關鍵操作的數(shù)據(jù)流程。KiddenFS文件系統(tǒng)由元數(shù)據(jù)服務器、數(shù)據(jù)服務