內(nèi)存云分級混合存儲架構(gòu)數(shù)據(jù)遷移策略.pdf

1、隨著信息時(shí)代的到來，以社交網(wǎng)絡(luò)為代表的在線數(shù)據(jù)密集型應(yīng)用迅速發(fā)展，在線密集型數(shù)據(jù)對數(shù)據(jù)的實(shí)時(shí)性、交互性、準(zhǔn)確性有著較高的要求，而現(xiàn)有的存儲系統(tǒng)采用的磁盤訪問具有很高的延遲，已經(jīng)成為大數(shù)據(jù)時(shí)代影響計(jì)算機(jī)性能的瓶頸。NoSQL等新型數(shù)據(jù)庫系統(tǒng)以及云計(jì)算的出現(xiàn)，以及虛擬化、分布式的處理方式，大大提高了計(jì)算機(jī)系統(tǒng)的服務(wù)性能，但是都未能從根本上解決計(jì)算機(jī)磁盤的延遲問題。
　　近年來隨著硬件技術(shù)的發(fā)展，內(nèi)存快速傳輸?shù)奶攸c(diǎn)成為了替代磁盤的選擇之

2、一。內(nèi)存云RAMCloud是由內(nèi)存作為服務(wù)器存儲介質(zhì)的云系統(tǒng)，它將云系統(tǒng)的數(shù)據(jù)中心從磁盤遷移至內(nèi)存中，實(shí)現(xiàn)數(shù)據(jù)在內(nèi)存系統(tǒng)中的快速訪問，摒棄了磁盤訪問時(shí)延大的缺點(diǎn)，從根本上解決了磁盤瓶頸危機(jī)。但是在內(nèi)存云這一特殊的云服務(wù)器上，內(nèi)存高昂的價(jià)格和較低容量比使得大規(guī)模的內(nèi)存云集群成本過高，無法大規(guī)模應(yīng)用于海量在線密集型應(yīng)用的數(shù)據(jù)存儲。
　　為了實(shí)現(xiàn)在線海量數(shù)據(jù)的高效存儲與訪問,增加內(nèi)存云數(shù)據(jù)存儲容量，本文采用分級存儲管理的思想，引入SSD

3、作為二級存儲介質(zhì)，與內(nèi)存、HDD構(gòu)成三級混合存儲架構(gòu)，并在內(nèi)存云分級存儲架構(gòu)下，提出基于數(shù)據(jù)重要性排名的自適應(yīng)遷移策略。首先對系統(tǒng)數(shù)據(jù)的重要性指標(biāo)進(jìn)行建模MMDS，通過數(shù)據(jù)本身的大小、時(shí)間重要性、用戶訪問總量等因素對數(shù)據(jù)本身的重要性進(jìn)行計(jì)算；其次，采用了推薦系統(tǒng)中相似用戶和PageRank算法中的重要性排名思想對數(shù)據(jù)的潛在價(jià)值進(jìn)行評估，數(shù)據(jù)重要性和潛在價(jià)值共同決定了數(shù)據(jù)的重要程度。然后基于數(shù)據(jù)的重要性排名，設(shè)計(jì)了自適應(yīng)的數(shù)據(jù)遷移策略。實(shí)