實(shí)時數(shù)據(jù)倉庫中查詢與更新調(diào)度策略的研究與實(shí)現(xiàn).pdf

1、隨著信息技術(shù)的飛速發(fā)展，企業(yè)或組織的信息化建設(shè)不斷深入，企業(yè)或組織搜集了大量的數(shù)據(jù)信息，需要數(shù)據(jù)倉庫提供決策支持。為增強(qiáng)市場競爭優(yōu)勢或提升社會安全保障能力，企業(yè)或組織對數(shù)據(jù)倉庫的實(shí)時性提出了越來越高的要求，但傳統(tǒng)數(shù)據(jù)倉庫不能滿足這種實(shí)時性需求。因此，出現(xiàn)了提供實(shí)時決策支持的實(shí)時數(shù)據(jù)倉庫系統(tǒng)。在實(shí)時數(shù)據(jù)倉庫應(yīng)用領(lǐng)域，決策者期望短的響應(yīng)時間和高的數(shù)據(jù)新鮮度。然而，由于存在高負(fù)載和可能發(fā)生沖突的連續(xù)查詢與更新任務(wù)，實(shí)時數(shù)據(jù)倉庫同時滿足決策者的

2、上述兩個需求具有極大的挑戰(zhàn)性，但具有實(shí)用價值。如何有效提高用戶需求的滿意度是一個亟待解決的問題。因此，實(shí)時數(shù)據(jù)倉庫體系結(jié)構(gòu)和查詢與更新實(shí)時調(diào)度算法成為研究的熱點(diǎn)，并具有重要意義。
　　本文首先全面分析了現(xiàn)有的實(shí)時數(shù)據(jù)倉庫體系結(jié)構(gòu)，確定了更新任務(wù)與查詢?nèi)蝿?wù)的負(fù)載分布情況，利用副本機(jī)制將實(shí)時性更新任務(wù)的轉(zhuǎn)換過程與OLTP系統(tǒng)相分離，以減少實(shí)時更新對OLTP系統(tǒng)性能的影響。然后提出了改進(jìn)的基于ODS實(shí)時數(shù)據(jù)倉庫體系結(jié)構(gòu)，分類處理實(shí)時更新

3、任務(wù)，利用基于觸發(fā)器的實(shí)時捕獲方法，采用不同的映射和裝載機(jī)制。該方案可以盡可能實(shí)時地裝載更新數(shù)據(jù)，從而提高查詢結(jié)果新鮮度。本文將不能實(shí)時裝載的任務(wù)放于更新任務(wù)隊列，將用戶提交的查詢?nèi)蝿?wù)放于查詢?nèi)蝿?wù)隊列。對于以上的兩種任務(wù)，本文提出了基于用戶意愿的查詢與更新二級調(diào)度算法，允許用戶指出可接受的查詢響應(yīng)時間即服務(wù)質(zhì)量，和可以接受的結(jié)果陳舊度即數(shù)據(jù)質(zhì)量，并詳細(xì)介紹了此二級調(diào)度策略思想以及實(shí)現(xiàn)方法。最后，利用TPC-DS基準(zhǔn)對本文中提出的體系結(jié)構(gòu)