面向?qū)崟r(shí)數(shù)據(jù)倉庫的達(dá)夢(mèng)數(shù)據(jù)交換平臺(tái)改進(jìn).pdf

1、在當(dāng)前經(jīng)濟(jì)競(jìng)爭(zhēng)激烈的信息化時(shí)代,實(shí)時(shí)數(shù)據(jù)倉庫不僅需要為BI(BusinessIntelligence)系統(tǒng)提供預(yù)測(cè)和分析的戰(zhàn)略性支持,而且還需要提供實(shí)時(shí)戰(zhàn)術(shù)性決策支持。實(shí)時(shí)戰(zhàn)術(shù)性決策支持要求實(shí)時(shí)數(shù)據(jù)倉庫能夠進(jìn)行實(shí)時(shí)快速地更新,然而傳統(tǒng)數(shù)據(jù)倉庫ETL周期調(diào)度更新方式和批量處理不能實(shí)施實(shí)時(shí)快速地更新,鑒于達(dá)夢(mèng)數(shù)據(jù)交換平臺(tái)是一款專業(yè)的ETL產(chǎn)品,且不能對(duì)實(shí)時(shí)數(shù)據(jù)倉庫提供實(shí)時(shí)支持,因此,對(duì)達(dá)夢(mèng)ETL改進(jìn)以適應(yīng)實(shí)時(shí)數(shù)據(jù)倉庫環(huán)境具有重要意義。

2、>　　基于實(shí)時(shí)數(shù)據(jù)倉庫特點(diǎn)及對(duì)ETL新要求的分析,提出了一種實(shí)時(shí)數(shù)據(jù)倉庫體系結(jié)構(gòu);同時(shí)在對(duì)達(dá)夢(mèng)ETL實(shí)現(xiàn)原理進(jìn)行了深入研究基礎(chǔ)上,從調(diào)度策略和ETL過程執(zhí)行兩方面進(jìn)行了改進(jìn)。其一:考慮到傳統(tǒng)數(shù)據(jù)倉庫以天、星期和月等為周期進(jìn)行周期調(diào)度,這種方式的數(shù)據(jù)時(shí)延很大,不能滿足實(shí)時(shí)數(shù)據(jù)倉庫環(huán)境的要求。因此在達(dá)夢(mèng)ETL上增加了一種事件觸發(fā)調(diào)度,事件觸發(fā)調(diào)度是一種靈活的實(shí)時(shí)調(diào)度策略,它結(jié)合了數(shù)據(jù)源中變更數(shù)據(jù)的特點(diǎn)及用戶的需求等,可以實(shí)現(xiàn)從多角度設(shè)置觸發(fā)

3、條件,能夠?qū)崟r(shí)地對(duì)數(shù)據(jù)倉庫中數(shù)據(jù)進(jìn)行更新,很好地滿足實(shí)時(shí)數(shù)據(jù)倉庫對(duì)ETL的實(shí)時(shí)調(diào)度的需求。其二:實(shí)時(shí)數(shù)據(jù)倉實(shí)時(shí)性實(shí)時(shí)觸發(fā)調(diào)度需要快速執(zhí)行ETL過程,而達(dá)夢(mèng)ETL過程執(zhí)行時(shí),數(shù)據(jù)抽取、轉(zhuǎn)換和裝載過程各在一個(gè)線程中執(zhí)行,因此采用了多線程任務(wù)執(zhí)行分解方案對(duì)ETL過程執(zhí)行加于改進(jìn),實(shí)現(xiàn)多線程并發(fā)執(zhí)行數(shù)據(jù)抽取、轉(zhuǎn)換和裝載過程,通過提高并發(fā)度來提高ETL過程的執(zhí)行效率。
　　通過實(shí)驗(yàn)表明,事件觸發(fā)調(diào)度策略能夠根據(jù)用戶所設(shè)置的條件進(jìn)行判斷,在條