基于網(wǎng)格的數(shù)字化虛擬人海量數(shù)據(jù)管理技術(shù)研究.pdf

1、由于信息技術(shù)的飛速發(fā)展,數(shù)據(jù)爆炸已成為一個突出的問題,因而海量數(shù)據(jù)管理技術(shù)成為人們關(guān)心的熱點研究課題。本文以數(shù)字化虛擬人為背景,基于數(shù)據(jù)網(wǎng)格技術(shù),對海量數(shù)據(jù)管理技術(shù)做了一定程度的探索研究。數(shù)據(jù)網(wǎng)格技術(shù)是網(wǎng)格的研究方向之一,側(cè)重于數(shù)據(jù)的存儲和管理。以現(xiàn)有的分布式、并行式等數(shù)據(jù)管理技術(shù)為基礎(chǔ),數(shù)據(jù)網(wǎng)格致力于集成網(wǎng)絡(luò)中的存儲資源、數(shù)據(jù)資源、計算資源等,建立分布海量數(shù)據(jù)的一體化數(shù)據(jù)訪問、存儲、傳輸、管理與服務(wù)架構(gòu),為海量數(shù)據(jù)的管理提供了一種新的

2、解決方案。本文研究了基于數(shù)據(jù)網(wǎng)格的海量數(shù)據(jù)管理,以數(shù)字化虛擬人為背景,結(jié)合數(shù)字人數(shù)據(jù)集的特點,對元數(shù)據(jù)管理、副本管理、高速數(shù)據(jù)傳輸、快速數(shù)據(jù)訪問等關(guān)鍵技術(shù)進行了探索,并在局域網(wǎng)內(nèi)建立了一個基于數(shù)據(jù)網(wǎng)格的數(shù)字化虛擬人海量數(shù)據(jù)管理原型系統(tǒng)。該系統(tǒng)將網(wǎng)絡(luò)上分布異構(gòu)的各種資源集成在一起,形成虛擬的存儲環(huán)境,為上層應(yīng)用提供統(tǒng)一的訪問接口,達到了數(shù)據(jù)的高度共享。主要的工作和成果如下:①元數(shù)據(jù)管理策略研究元數(shù)據(jù)是數(shù)據(jù)管理技術(shù)中一個重要的組成部分。目前

3、大多數(shù)據(jù)網(wǎng)格元數(shù)據(jù)研究只關(guān)注了文件系統(tǒng)中的數(shù)據(jù),而對數(shù)據(jù)庫系統(tǒng)中的數(shù)據(jù)卻很少涉及。針對這一現(xiàn)象,本文提出并建立了一個數(shù)據(jù)網(wǎng)格環(huán)境下的元數(shù)據(jù)管理策略。該策略采用了語義相關(guān)層次模式,可以提高數(shù)據(jù)查詢效率,并獲得資源的負載均衡性。②數(shù)據(jù)副本管理策略研究為提高數(shù)據(jù)的可靠性和數(shù)據(jù)的訪問效率,通常采取副本技術(shù)。本文主要針對副本創(chuàng)建的時間和粒度進行了研究,提出基于排隊系統(tǒng)的副本創(chuàng)建時間策略和基于流行度的副本粒度選擇策略,可以獲得副本創(chuàng)建的良機,節(jié)約存