數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)中若干關(guān)鍵技術(shù)的研究.pdf

1、東北大學(xué)博士學(xué)位論文數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)中若干關(guān)鍵技術(shù)的研究姓名：鮑玉斌申請(qǐng)學(xué)位級(jí)別：博士專業(yè)：計(jì)算機(jī)軟件與理論指導(dǎo)教師：于戈20030801東北大學(xué)博士學(xué)位論文摘要提供了數(shù)據(jù)完整性分析、數(shù)據(jù)集成工具、數(shù)據(jù)轉(zhuǎn)換工具、統(tǒng)計(jì)分析工具和數(shù)據(jù)挖掘工具。同時(shí)，針對(duì)數(shù)據(jù)倉(cāng)庫(kù)是多數(shù)據(jù)源的集成產(chǎn)品，提出了數(shù)據(jù)倉(cāng)庫(kù)中數(shù)據(jù)集成框架。該框架給出了關(guān)系模式的兩級(jí)語(yǔ)義沖突分類，即模式結(jié)構(gòu)沖突和元組實(shí)例沖突，給出了解決這兩級(jí)語(yǔ)義沖突的解決策略。第三，本文討論了數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)

2、中的維度縮減的基本概念，給出了按維度縮減算法的功能進(jìn)行算法分類，即剔除冗余屬性的算法、剔除不相關(guān)屬性的算法和綜合算法，提出了基于分形維的快速維度縮減算法，該方法利用分形維作為屬性子集的優(yōu)度度量準(zhǔn)則。該方法可以剔除無(wú)監(jiān)督數(shù)據(jù)集中的冗余屬性，只需掃描～遍數(shù)據(jù)集就可以得到滿足精度要求的屬性子集。實(shí)驗(yàn)研究發(fā)現(xiàn)，該算法具有很好的維度可擴(kuò)展性。在數(shù)據(jù)倉(cāng)庫(kù)的運(yùn)行與維護(hù)管理的研究中，首先，討論了數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)更毅和維護(hù)技術(shù)，提出了視圖定義改變后的數(shù)據(jù)集

3、市增量更新策略。主要針對(duì)sELEcT_】限OMⅥ啊ERE視圖的幾種基本改變方式，設(shè)計(jì)了即考慮模式定義改變又考慮視圖的底層數(shù)據(jù)源有數(shù)據(jù)增量的視圖維護(hù)和改寫(xiě)算法。其次，由于數(shù)據(jù)倉(cāng)庫(kù)中數(shù)據(jù)處理程序眾多，尤其是在企業(yè)級(jí)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)中，如何調(diào)度任務(wù)的運(yùn)行是數(shù)據(jù)倉(cāng)庫(kù)管理員面臨的巨大問(wèn)題。采用工作流的思想，設(shè)計(jì)提出了企業(yè)級(jí)數(shù)據(jù)倉(cāng)庫(kù)的任務(wù)調(diào)度策略以及設(shè)計(jì)出了自動(dòng)任務(wù)調(diào)度框架。該框架收集系統(tǒng)中的各種數(shù)據(jù)處理任務(wù)，根據(jù)應(yīng)用領(lǐng)域的相關(guān)規(guī)則，自動(dòng)獲取任務(wù)的輸入

4、和輸出，進(jìn)而形成任務(wù)流圖，進(jìn)而調(diào)度和監(jiān)視任務(wù)的執(zhí)行，并進(jìn)行了實(shí)驗(yàn)?zāi)M研究。最后，本文設(shè)計(jì)并實(shí)現(xiàn)了一個(gè)基于客戶／N務(wù)器方式的以數(shù)據(jù)倉(cāng)庫(kù)為數(shù)據(jù)源的ROLAP原型系統(tǒng)，并使用OLAP的Benchmark進(jìn)行性能測(cè)試。該系統(tǒng)在Windows環(huán)境下，使用vC、CBuilder和OBDC接口實(shí)現(xiàn)的，支持多種數(shù)據(jù)庫(kù)平臺(tái)。本系統(tǒng)是國(guó)家863計(jì)劃資助項(xiàng)目的一部分，項(xiàng)目通過(guò)了國(guó)家863專家組的驗(yàn)收和遼寧省科技廳組織的成果鑒定。關(guān)鍵字；數(shù)據(jù)倉(cāng)庫(kù)，數(shù)據(jù)集市，聯(lián)