基于數(shù)據(jù)挖掘技術(shù)的實時大容量數(shù)據(jù)分析的研究.pdf

1、隨著數(shù)據(jù)庫技術(shù)、人工智能和數(shù)理統(tǒng)計等技術(shù)的發(fā)展與融合,數(shù)據(jù)挖掘技術(shù)應(yīng)運而生.數(shù)據(jù)挖掘作為20世紀末剛剛興起的數(shù)據(jù)智能分析技術(shù),由于其所具有的廣闊應(yīng)用前景而備受關(guān)注,已逐漸成為數(shù)據(jù)庫和人工智能領(lǐng)域的一個熱點,數(shù)據(jù)挖掘中的方法已經(jīng)在各行各業(yè)獲得了廣泛的應(yīng)用,并取得了顯著的成果.數(shù)據(jù)挖掘已經(jīng)成為一個新興的、潛力巨大的研究領(lǐng)域.本文介紹了數(shù)據(jù)挖掘的理論與方法,包括數(shù)據(jù)挖掘的定義、挖掘的主要過程、分類和主要技術(shù)手段.同時重點研究了數(shù)據(jù)挖掘中的聚類

2、分析和異常數(shù)據(jù)挖掘方法,并以油氣集輸管線的壓力數(shù)據(jù)采集與分析為例,對聚類分析和異常數(shù)據(jù)挖掘技術(shù)的方法進行了研究,針對油氣集輸管線泄漏檢測工程的實際情況提出了數(shù)據(jù)預(yù)處理的過程,進而利用異常數(shù)據(jù)挖掘的方法來進行實時、大容量數(shù)據(jù)的分析.同時,在系統(tǒng)的開發(fā)研究過程中,作者使用Visual C++6.0完成了相應(yīng)模塊的程序編寫工作,從而實現(xiàn)了油氣集輸管線的泄漏檢測,擴展了數(shù)據(jù)挖掘的應(yīng)用領(lǐng)域.本文側(cè)重于對數(shù)據(jù)分析與處理的宏觀方法進行了研究,研究中所