基于FastDFS的大并發(fā)問題的研究與應(yīng)用.pdf

1、隨著時代的發(fā)展，數(shù)據(jù)的信息量出現(xiàn)了爆炸式的增長，單純的分布式文件系統(tǒng)已經(jīng)很難滿足海量數(shù)據(jù)的處理請求。目前，針對文件系統(tǒng)所面臨的海量小文件大并發(fā)請求問題，許多學(xué)者都對其展開了研究，但是已有的研究成果依然存在一些不足之處。因此本論文主要研究如何進一步提高FastDFS的文件處理能力，以便更好的解決海量小文件存儲所面臨的大并發(fā)問題。本論文的主要工作如下:
　　(1)簡單概述本課題的研究背景及意義，同時對分布式文件系統(tǒng)、非關(guān)系型數(shù)據(jù)庫、服

2、務(wù)器集群等的國內(nèi)外研究現(xiàn)狀進行了重點介紹，為接下來本文的相關(guān)技術(shù)理論知識研究做了很好的鋪墊。
　　(2)首先分別對FastDFS、Redis數(shù)據(jù)庫、Nginx集群進行了深入的研究與分析，總結(jié)出它們各自的優(yōu)勢與不足;其次針對它們在應(yīng)對大并發(fā)問題所表現(xiàn)出的不足，提出將FastDFS、Redis數(shù)據(jù)庫以及Nginx服務(wù)器集群同時應(yīng)用于實際研發(fā)項目中，在綜合它們優(yōu)點的同時彌補各自的不足之處，從而更好的應(yīng)對大并發(fā)問題;最后通過模擬實驗及實驗

3、數(shù)據(jù)結(jié)果的分析對比，驗證了本文提出的組合架構(gòu)FastDFS+Redis+Nginx集群與原有的FastDFS+Redis架構(gòu)相比，在處理海量用戶的大并發(fā)請求時，無論是文件上傳還是文件下載所需要的處理時間都會明顯減少。
　　(3)通過引入Piece機制，重新利用了FastDFS文件存儲結(jié)構(gòu)中大量的閑置空間，不僅提高了文件的存儲空間利用率，而且優(yōu)化了FastDFS本身的性能。通過模擬實驗及對相關(guān)實驗數(shù)據(jù)的分析，驗證了本文提出的引入Pi