云存儲系統(tǒng)日志關(guān)聯(lián)規(guī)則挖掘研究.pdf

1、云計算是目前 IT領域最為熱門的技術(shù),而云存儲更是云計算的核心。云存儲系統(tǒng)的日志文件記錄了云存儲基礎設施的運行狀態(tài)、節(jié)點的錯誤信息、上層用戶的相應情況和用戶對云存儲系統(tǒng)的訪問情況等。對這些日志文件進行挖掘分析對加強系統(tǒng)性能和提高系統(tǒng)的管理維護具有非常重要的意義。
　　本文主要研究如何使用關(guān)聯(lián)規(guī)則挖掘算法對云存儲系統(tǒng)日志進行有效地分析,利用挖掘算法從日志文件中挖掘出有效的關(guān)聯(lián)規(guī)則。本文首先介紹了云存儲系統(tǒng),以及日志文件的特點和對其研

2、究的重要性。其次給出了數(shù)據(jù)挖掘的概念、過程以及過程中應用到的主要技術(shù),重點介紹了關(guān)聯(lián)規(guī)則的概念和挖掘步驟及分類。接著介紹了日志分析的一般過程,并對預處理和模式發(fā)現(xiàn)的關(guān)鍵步驟進行詳細的闡述。詳細介紹了模式發(fā)現(xiàn)中使用的 Apriori算法的原理和流程,分析了它的不足并且介紹了一種基于矩陣的 Apriori算法。
　　本文針對云存儲日志的特點,對日志挖掘過程中的預處理步驟進行了改進,將不同格式的日志文件統(tǒng)一格式,便于關(guān)聯(lián)規(guī)則挖掘分析,提