版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領(lǐng)
文檔簡介
1、隨著計算機技術(shù)以及互聯(lián)網(wǎng)運用高速的擴展到人類社會生產(chǎn)生活的各個方面,數(shù)據(jù)量呈現(xiàn)出爆發(fā)性的增長。如今,大數(shù)據(jù)集以及超大數(shù)據(jù)集的存儲和處理已成為很多企業(yè)面臨的新的挑戰(zhàn)。而如何能以更加快速、高效、低成本的方式從海量數(shù)據(jù)中挖掘有價值的、可理解的知識從而幫助企業(yè)制定決策成為數(shù)據(jù)挖掘技術(shù)面臨的新課題。
云計算技術(shù)的出現(xiàn)為數(shù)據(jù)挖掘技術(shù)的發(fā)展帶來了新的機遇。云計算技術(shù)通過使存儲和計算能力均勻的分布到集群中的多個存儲和計算節(jié)點上,從而實現(xiàn)了對超
2、大數(shù)據(jù)集的巨大的存儲和計算能力。由于可以使用大量的廉價計算機通過集群來代替價格高昂的服務(wù)器,云計算大大的降低了成本。使用云計算技術(shù)提供的巨大的存儲能力和計算能力,數(shù)據(jù)挖掘技術(shù)進入了基于云計算的數(shù)據(jù)挖掘時代。
HADOOP是一個用于構(gòu)建云平臺的Apache開源項目。使用HADOOP框架有利于我們方便、快速的實現(xiàn)計算機集群。在HADOOP平臺上,采用了HDFS(分布式文件系統(tǒng))來實現(xiàn)超大文件的存儲和容錯,而使用了MapReduce
3、的編程模式來進行計算。將HADOOP運用到數(shù)據(jù)挖掘,一個關(guān)鍵的問題就是如何實現(xiàn)將傳統(tǒng)的數(shù)據(jù)挖掘算法實行并行化。對于傳統(tǒng)的數(shù)據(jù)挖掘算法,結(jié)合算法自身的特點,我們可以很容易或者需要深入研究才能發(fā)現(xiàn)它是否能夠并行。對于能夠并行實現(xiàn)的算法,結(jié)合MapReduce編程模式,我們可以將其移植到HADOOP平臺上,高效的、并行的完成數(shù)據(jù)挖掘任務(wù)。
本文首先詳細的介紹了云計算和HADOOP平臺的核心架構(gòu)以及運行機制。然后結(jié)合傳統(tǒng)的數(shù)據(jù)挖掘系統(tǒng)
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 眾賞文庫僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責。
- 6. 下載文件中如有侵權(quán)或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 基于Hadoop平臺的數(shù)據(jù)挖掘算法研究.pdf
- 基于Hadoop的數(shù)據(jù)挖掘技術(shù)研究.pdf
- 基于Hadoop的數(shù)據(jù)挖掘算法的研究.pdf
- 基于Hadoop平臺的醫(yī)保數(shù)據(jù)挖掘.pdf
- 基于Hadoop的海量小型XML數(shù)據(jù)挖掘的研究.pdf
- 基于Hadoop的橋梁監(jiān)測數(shù)據(jù)孤立點挖掘研究.pdf
- Hadoop下基于數(shù)量關(guān)聯(lián)規(guī)則的數(shù)據(jù)挖掘研究.pdf
- 基于Hadoop平臺的頻繁項數(shù)據(jù)挖掘算法研究.pdf
- 基于Hadoop技術(shù)的氣象數(shù)據(jù)采集及數(shù)據(jù)挖掘平臺的研究.pdf
- 基于Hadoop平臺的并行數(shù)據(jù)挖掘算法研究.pdf
- 基于Hadoop多維時態(tài)數(shù)據(jù)挖掘模型的研究與應(yīng)用.pdf
- 基于Hadoop的物流歷史數(shù)據(jù)聚類挖掘研究.pdf
- 基于Hadoop平臺的數(shù)據(jù)挖掘分類算法分析與研究.pdf
- 基于hadoop2.0的數(shù)據(jù)挖掘算法并行化研究
- 基于Hadoop的海量工程數(shù)據(jù)關(guān)聯(lián)規(guī)則挖掘方法研究.pdf
- 基于Hadoop的健康物聯(lián)網(wǎng)數(shù)據(jù)挖掘算法研究與實現(xiàn).pdf
- 基于Hadoop的校園卡數(shù)據(jù)挖掘的研究與實現(xiàn).pdf
- Hadoop平臺下數(shù)據(jù)挖掘的研究與實現(xiàn).pdf
- 基于Hadoop云平臺的海量數(shù)字圖像數(shù)據(jù)挖掘的研究.pdf
- Hadoop下基于分類和關(guān)聯(lián)規(guī)則的公安數(shù)據(jù)挖掘研究.pdf
評論
0/150
提交評論