多元數(shù)據(jù)服務(wù)器環(huán)境下的元數(shù)據(jù)管理研究.pdf

1、通常情況下用戶(hù)請(qǐng)求分為數(shù)據(jù)請(qǐng)求和元數(shù)據(jù)請(qǐng)求。雖然元數(shù)據(jù)很小，但是在存儲(chǔ)系統(tǒng)的操作中，元數(shù)據(jù)操作占50%到80%。因此，元數(shù)據(jù)的高效管理非常重要。而隨著存儲(chǔ)體系規(guī)模的增大以及數(shù)據(jù)訪(fǎng)問(wèn)密集度的增加，集中式元數(shù)據(jù)管理已經(jīng)漸漸不能勝任?，F(xiàn)今的高性能計(jì)算不僅對(duì)存儲(chǔ)系統(tǒng)的I/O帶寬和元數(shù)據(jù)處理性能提出了很高的需求，而且對(duì)存儲(chǔ)系統(tǒng)的規(guī)模和擴(kuò)展性也有很高的需求。單一的元數(shù)據(jù)服務(wù)器已經(jīng)不能滿(mǎn)足應(yīng)用對(duì)規(guī)模和性能日益增長(zhǎng)的需求。采用多元數(shù)據(jù)服務(wù)器是存儲(chǔ)系統(tǒng)發(fā)

2、展的必然趨勢(shì)。
　　 在PB級(jí)的存儲(chǔ)系統(tǒng)中，通常由數(shù)個(gè)元數(shù)據(jù)服務(wù)器構(gòu)成機(jī)群來(lái)滿(mǎn)足上萬(wàn)個(gè)用戶(hù)的并發(fā)訪(fǎng)問(wèn)。元數(shù)據(jù)應(yīng)該均勻地分配到各個(gè)元數(shù)據(jù)服務(wù)器上以保證一般情況下的負(fù)載均衡。在基于對(duì)象存儲(chǔ)系統(tǒng)中實(shí)現(xiàn)了基于父目錄對(duì)象號(hào)的哈希方法（Directory Object ID and Filename Hashing，DOIDFH）分布式元數(shù)據(jù)管理方案，它結(jié)合了子樹(shù)分割和哈希方法的優(yōu)點(diǎn)，可以將同一目錄下的文件均勻地分布到多個(gè)MDS中，并部分保

3、留了同一目錄下的存儲(chǔ)局部性。同時(shí)與子樹(shù)分割方案進(jìn)行了性能比較，結(jié)果表明DOIDFH方案下元數(shù)據(jù)服務(wù)器的負(fù)載比較均衡，并且系統(tǒng)響應(yīng)速度以及吞吐量都優(yōu)于子樹(shù)分割方案。
　　 分布式存儲(chǔ)系統(tǒng)的性能與元數(shù)據(jù)在多個(gè)元數(shù)據(jù)服務(wù)器上的分布情況密切相關(guān)，如果大量的訪(fǎng)問(wèn)集中于某些特定的元數(shù)據(jù)（熱點(diǎn)），則系統(tǒng)性能會(huì)受到極大的影響。不同情況不同方案下熱點(diǎn)問(wèn)題的解決方式也不相同。通過(guò)在各服務(wù)器上尋找成為熱點(diǎn)的元數(shù)據(jù)然后將熱點(diǎn)元數(shù)據(jù)在其它節(jié)點(diǎn)上做鏡像的方