云計(jì)算下關(guān)聯(lián)分類技術(shù)的研究與實(shí)現(xiàn).pdf

1、云計(jì)算（Cloud Computing）技術(shù)是互聯(lián)網(wǎng)快速發(fā)展以后才出現(xiàn)一個(gè)全新概念。時(shí)隔僅僅幾年，云計(jì)算受到各界關(guān)注的程度就超過了網(wǎng)格計(jì)算（Grid Computing）。它在本質(zhì)上講它是一種商業(yè)計(jì)算模型，是將計(jì)算任務(wù)分布在大量計(jì)算機(jī)構(gòu)成的資源池上，形成龐大的計(jì)算力來滿足用戶所需要的服務(wù)。簡(jiǎn)而言之，其原理是通過網(wǎng)絡(luò)將龐大的計(jì)算任務(wù)分割成無數(shù)個(gè)較小的子任務(wù)，然后分發(fā)給各個(gè)計(jì)算節(jié)點(diǎn)處理，等處理完成之后將結(jié)果回傳給用戶。利用這種技術(shù)解決方案可

2、以實(shí)現(xiàn)強(qiáng)大的計(jì)算能力?？傊?，云計(jì)算為普通用戶和一般機(jī)構(gòu)提供了強(qiáng)大的計(jì)算能力，并且大大地降低了成本。
　　伴隨著信息技術(shù)的飛速發(fā)展，信息量也在爆炸式的飛速增長(zhǎng)。從這些海量的數(shù)據(jù)信息中挖掘出有用的信息，是件非常不容易的事情。許多傳統(tǒng)數(shù)據(jù)挖掘算法往往只能適用小規(guī)模數(shù)據(jù)，當(dāng)遇到處理海量數(shù)據(jù)時(shí)，它們往往會(huì)因處理量的非常巨大而速度減慢甚至無法運(yùn)行。這無疑是許多傳統(tǒng)挖掘算法的瓶頸。云計(jì)算它以其可靠、方便和無限強(qiáng)大的計(jì)算能力為海量的數(shù)據(jù)挖掘提供了

3、可能。如果我們能夠?qū)鹘y(tǒng)的數(shù)據(jù)挖掘算法做改進(jìn)，使其能部署在云計(jì)算框架下運(yùn)行，對(duì)海量數(shù)據(jù)的處理中遇到的瓶頸問題將能迎刃而解。
　　本文首先介紹云計(jì)算基本實(shí)現(xiàn)原理。當(dāng)前各個(gè)知名的IT巨頭提出的云計(jì)算解決方案各不相同。Google公司是云計(jì)算領(lǐng)域最知名廠家，它的解決方案簡(jiǎn)單而又高效，得到大多數(shù)人的認(rèn)可[8]。所以本文主要以Google公司的云計(jì)算技術(shù)為例介紹相應(yīng)的技術(shù)和策略，同時(shí)還主要介紹了開源Hadoop系統(tǒng)及分布式文件系統(tǒng)HDFS和