網(wǎng)格環(huán)境下基于多數(shù)據(jù)源的數(shù)據(jù)傳輸.pdf

1、數(shù)據(jù)密集型的科學(xué)與工程應(yīng)用(如計算力學(xué)數(shù)值模擬、氣象預(yù)測)需要在廣域、分布式的計算環(huán)境中快速安全的傳輸海量的數(shù)據(jù)。因此在如何網(wǎng)格環(huán)境中高效、可靠、安全的傳輸海量文件是網(wǎng)格計算中的一個關(guān)鍵性研究課題。 本文所構(gòu)建的網(wǎng)格環(huán)境下基于多數(shù)據(jù)源的數(shù)據(jù)傳輸工具MFTP是MASSIVE(MultidisciplinaryApplications-OrientedSimulationandVisualizationEnvironment)網(wǎng)格平

2、臺的重要組成部分。MASSIVE旨在構(gòu)建面向多學(xué)科應(yīng)用的模擬與可視化網(wǎng)格環(huán)境。MASSIVE網(wǎng)格平臺處于工程應(yīng)用與網(wǎng)格中間件之間，為用戶提供一個圖形化的網(wǎng)格應(yīng)用集成開發(fā)環(huán)境，它建立在GlobusToolkit中間件之上并支持基于網(wǎng)格的計算流體力學(xué)與計算固體力學(xué)問題求解及可視化。 本文所論述的MFTP利用網(wǎng)格環(huán)境下存在的多個數(shù)據(jù)備份Replica，提出了一種基于Replica級別的并行傳輸方法以提高數(shù)據(jù)傳輸?shù)男阅堋Ｋ牧鞒倘缦拢河?/p>

3、戶輸入一個邏輯文件名，MFTP調(diào)用網(wǎng)格的復(fù)制定位服務(wù)(ReplicaLocationService，RLS)獲得文件所在的實際的物理存儲地址(physicallocations)；MFTP利用GridFTP提供的安全認(rèn)證，部分文件傳輸，并行傳輸開始與用戶選定的Replica進行安全認(rèn)證并創(chuàng)建一個或多個數(shù)據(jù)通道，按照Replica負(fù)載量算法決定各個Replica的數(shù)據(jù)傳輸量大小傳輸數(shù)據(jù)塊；最后MFTP根據(jù)各個數(shù)據(jù)塊的偏移地址重新合并文件。