本書(shū)圍繞城市交通信號(hào)控制難題，綜合運(yùn)用智能計(jì)算與深度強(qiáng)化學(xué)習(xí)技術(shù)展開(kāi)介紹。開(kāi)篇闡述了交通擁堵現(xiàn)狀及智能交通系統(tǒng)發(fā)展背景，梳理了交通信號(hào)控制技術(shù)的研究現(xiàn)狀。接著針對(duì)多交叉口信號(hào)協(xié)同控制，提出半分布式三層框架及相應(yīng)優(yōu)化模型與算法；針對(duì)傳統(tǒng)車流動(dòng)力學(xué)建模局限，引入單智能體深度強(qiáng)化學(xué)習(xí)方法，創(chuàng)新動(dòng)作空間、獎(jiǎng)勵(lì)函數(shù)等；針對(duì)多交叉口信號(hào)控制難題，提出新算法并結(jié)合平均場(chǎng)理論等機(jī)制，解決維度災(zāi)難和Q值過(guò)估計(jì)問(wèn)題。