智能數(shù)據(jù)維護.pdf

1、如何提高數(shù)據(jù)維護能力，保證數(shù)據(jù)質(zhì)量是擺在數(shù)據(jù)庫應用方面的重要課題。對于數(shù)據(jù)質(zhì)量問題，數(shù)據(jù)庫用戶大多是從企業(yè)行業(yè)內(nèi)部管理制度角度出發(fā)，加強制度建設，增加人員責任心等措施來提高數(shù)據(jù)質(zhì)量。數(shù)據(jù)庫廠商則從數(shù)據(jù)庫技術方面力求提供通用產(chǎn)品解決數(shù)據(jù)質(zhì)量，但其提供的方法大多是基于技術層面的，缺乏與具體用戶復雜業(yè)務邏輯的有效結(jié)合。國內(nèi)一些研究機構也提出了關于解決數(shù)據(jù)質(zhì)量的理論，他們認為數(shù)據(jù)質(zhì)量管理如同產(chǎn)品質(zhì)量管理一樣貫穿于數(shù)據(jù)生命周期的各個階段，但目前尚

2、缺乏一個系統(tǒng)的思路。國內(nèi)外大多側(cè)重在數(shù)據(jù)倉庫和數(shù)據(jù)挖掘等系統(tǒng)范疇下的于數(shù)據(jù)質(zhì)量問題，屬事后型。研究海量數(shù)據(jù)進行清洗比較多，但這些方法不能直接提高數(shù)據(jù)本身的質(zhì)量，只能減少不可靠數(shù)據(jù)的對決策的影響，不能從根本上解決問題。對于數(shù)據(jù)質(zhì)量的監(jiān)控，對數(shù)據(jù)維護的投入應該前移到數(shù)據(jù)的采集、繁衍期。 數(shù)據(jù)質(zhì)量通用標準是：數(shù)據(jù)的完整性、一致性、準確性。對于單源數(shù)據(jù)信息系統(tǒng)要提高數(shù)據(jù)的質(zhì)量有一定難度，尤其是數(shù)據(jù)的準確性。本文提出對于無法從邏輯上判斷數(shù)

3、據(jù)準確性時，通過引入數(shù)理統(tǒng)計理論和方法來判斷數(shù)據(jù)準確的準確程度，從而發(fā)現(xiàn)問題數(shù)據(jù)。 數(shù)據(jù)維護通常是在數(shù)據(jù)出現(xiàn)問題后，通過信息管理系統(tǒng)或數(shù)據(jù)庫管理系統(tǒng)對數(shù)據(jù)進行調(diào)整、修改以維護其正常狀態(tài)。這種模式使數(shù)據(jù)維護始終處于被動狀態(tài)，本文引入Agent技術，把數(shù)據(jù)維護工作融入系統(tǒng)正常運行，實時進行問題數(shù)據(jù)的查找，主動發(fā)現(xiàn)問題并用規(guī)范的方法來處理問題數(shù)據(jù)，使數(shù)據(jù)維護工作效率得到提高，信息系統(tǒng)平均無故障時間增長。 本文結(jié)合大集中模式下稅

4、收業(yè)務管理系統(tǒng)，闡述了智能數(shù)據(jù)維護的實現(xiàn)過程。在策略方面，筆者提出主動的數(shù)據(jù)維護模式，改變數(shù)據(jù)維護思路。將數(shù)據(jù)維護工作貫穿到系統(tǒng)日常運行過程中，使數(shù)據(jù)維護量不會隨時間增加而呈線性增長的趨勢，使系統(tǒng)處在一種邊運行、邊“潤滑”的狀態(tài)，可以增長系統(tǒng)的平均無故障時間，較大地提高系統(tǒng)效率。問題數(shù)據(jù)的查找提前，且處理方法是標準可行的，使數(shù)據(jù)維護工作量處于可預測、可控的狀態(tài)。數(shù)據(jù)維護納入系統(tǒng)運行的范疇，形成閉環(huán)反饋系統(tǒng)，改變數(shù)據(jù)維護的概念。對于數(shù)據(jù)維