基于Q學(xué)習(xí)的傳感器節(jié)點(diǎn)任務(wù)調(diào)度算法研究.pdf

1、在動(dòng)態(tài)變化的無線傳感器網(wǎng)絡(luò)(WSN)環(huán)境中，如何在有效利用傳感器節(jié)點(diǎn)受限資源的同時(shí)獲得較好的應(yīng)用性能是WSN研究的關(guān)鍵問題之一。基于Q學(xué)習(xí)的傳感器節(jié)點(diǎn)任務(wù)調(diào)度算法是解決這一問題的有效途徑之一。根據(jù)學(xué)習(xí)方式的不同，現(xiàn)有學(xué)習(xí)型算法主要分為獨(dú)立學(xué)習(xí)型算法和合作學(xué)習(xí)型算法。
　　針對(duì)獨(dú)立學(xué)習(xí)型算法在能量消耗要求低的場(chǎng)景中存在應(yīng)用性能較差的問題，本文建立獨(dú)立Q學(xué)習(xí)模型，定義基本學(xué)習(xí)元素，提出一種基于Q學(xué)習(xí)和規(guī)劃的獨(dú)立型任務(wù)調(diào)度算法。該算法通

2、過改善節(jié)點(diǎn)的學(xué)習(xí)策略來提高節(jié)點(diǎn)的應(yīng)用性能，具體是建立基于優(yōu)先級(jí)機(jī)制和過期機(jī)制的規(guī)劃過程，有效利用經(jīng)驗(yàn)知識(shí)，加強(qiáng)有利于學(xué)習(xí)的任務(wù)被調(diào)度的趨勢(shì)，減弱不利于學(xué)習(xí)的任務(wù)被調(diào)度的趨勢(shì)。NS3實(shí)驗(yàn)結(jié)果表明該算法能夠根據(jù)環(huán)境變化進(jìn)行動(dòng)態(tài)任務(wù)調(diào)度;相比其他獨(dú)立學(xué)習(xí)型算法，該算法能夠在能量消耗要求低的場(chǎng)景中獲得較好的應(yīng)用性能。
　　現(xiàn)有合作學(xué)習(xí)型算法由于頻繁的交換合作信息，不能適用于應(yīng)用性能要求高的場(chǎng)景。針對(duì)該問題，本文建立合作Q學(xué)習(xí)模型，定義基本