ETL過程邏輯描述及其執(zhí)行.pdf

1、隨著數據倉庫的廣泛建立,數據倉庫系統(tǒng)的核心—用于數據倉庫數據加載和刷新維護的ETL工具越來越重要.市場上存在大量的ETL工具,這些ETL工具采用不同的實現技術,對應的ETL過程定義描述都基于數據源的數據模型和執(zhí)行ETL過程使用的實現技術.使用不同的ETL工具需要熟悉不同的數據模型和ETL過程實現中使用的相關語言.針對當前ETL工具中ETL設計的不足,我們提出了ETL過程的邏輯描述方法.首先作用統(tǒng)一數據模型描述具體的數據源對應的數據存儲模

2、型,屏蔽不同數據模型中描述的差異,讓用戶在統(tǒng)一數據模型上定義ETL過程;其次使用ETL過程邏輯描述從邏輯上描述整個ETL過程,屏蔽ETL過程中具體實現的差異,使用各種邏輯規(guī)則定義ETL過程中的數據轉換和數據清理.ETL過程的邏輯描述可以讓ETL過程設計人員專注于根據模式的語義進行的數據轉換映射和清理定義,不用考慮執(zhí)行的實現模式和數據模型之間的差異,減少定義的復雜程度,同時為自動定義ETL過程提供前提.該文結合數據倉庫系統(tǒng)中的ETL工具研