基于多智能體的城市交通信號控制研究.pdf

1、隨著城市交通與經(jīng)濟發(fā)展的矛盾日趨尖銳，交通擁堵、交通安全已成為社會關(guān)注的焦點。城市交通控制作為組織、控制交通流的主要手段之一，在解決城市交通問題中擔(dān)負著重要責(zé)任。如何運用現(xiàn)代的科技手段來緩解日益嚴峻的交通壓力是目前研究的重點。
　　 基于目前交通問題及交通系統(tǒng)發(fā)展的現(xiàn)狀，本文根據(jù)交通流實時變化的特征，研究了智能體在城市交通信號控制中的應(yīng)用。主要研究內(nèi)容有如下幾個方面：
　　 論文首先研究了基于多智能體的城市交通信號控制的

2、架構(gòu)。采用分層遞階的智能體結(jié)構(gòu)，并給出了具體的結(jié)構(gòu)模型。
　　 論文進一步把交通控制的最小單元——單路口作為研究對象，引入強化學(xué)習(xí)中的Q學(xué)習(xí)算法。針對Q 學(xué)習(xí)算法收斂速度較慢的缺點，充分利用學(xué)習(xí)過程中的經(jīng)驗知識，進而學(xué)習(xí)環(huán)境的模型，加快迭代的速度，最終實現(xiàn)Agent對路口交通流的優(yōu)化控制。在VISSIM中對單個路口采用改進的算法進行了仿真，并與定時控制、標準Q 學(xué)習(xí)進行了對比，結(jié)果表明了所提出的基于模型的Q 學(xué)習(xí)算法的有效性。<