收藏本站
《第二十六届中国控制会议论文集》2007年
收藏 | 手机打开
二维码
手机客户端打开本文

城市交通信号的在线强化学习控制

刘智勇  马凤伟  
【摘要】:城市交通信号控制系统具有非线性、模糊性、自组织性和不确定性等特征,传统的建模和控制方法难以取得理想的效果,人工智能方法提供了解决问题的新途径。针对交通信号控制系统的特点,提出了基于Dyna-Q强化学习的在线控制算法,利用交通信号控制Agent在试错过程中获得的经验知识进行模型估计,然后从估计的模型中规划动作,从而可以加速Q-学习迭代过程。采用TSIS交通分析软件对由8个路口组成的两条交通干线进行仿真,与定时控制、遗传算法和Q-学习控制方法进行比较,结果表明:Dyna-Q强化学习算法具有明显的优越性。
【基金】:广东省自然科学基金资助,项目批准号:06029813
【分类号】:U491.54

手机知网App
【参考文献】
中国期刊全文数据库 前7条
1 徐建闽,舒宁,尹宏宾;新型模糊控制算法在交叉口信号控制中的应用[J];华南理工大学学报(自然科学版);2000年06期
2 董超俊,刘智勇,邱祖廉;灾变粒子群优化算法及其在交通控制中的应用[J];计算机工程与应用;2005年29期
3 于德新;杨兆升;王媛;孙建平;;基于多智能体的城市道路交通控制系统及其协调优化[J];吉林大学学报(工学版);2006年01期
4 刘智勇;李水友;;基于免疫遗传算法的区域交通自适应协调控制[J];控制理论与应用;2006年01期
5 马寿峰,李英,刘豹;一种基于agent协调的两路口交通控制方法[J];系统工程学报;2003年03期
6 闻育,吴铁军;基于蚁群算法的交通控制降阶滚动优化[J];浙江大学学报(工学版);2005年06期
7 沈国江,王智,刘翔,孙优贤;城市区域交通智能控制研究[J];信息与控制;2004年01期
【共引文献】
中国期刊全文数据库 前10条
1 陈阳舟;张辉;杨玉珍;赵晓华;;基于中关村西区的区域协调模糊控制[J];北京工业大学学报;2006年11期
2 刘力军;马红霞;;混沌理论在交通领域中的应用前景初探[J];江西师范大学学报(自然科学版);2006年04期
3 郑积仕;汤志康;;一种基于模糊神经网络的城市道路交叉口可变相序控制[J];重庆工学院学报;2006年05期
4 欧居尚;;道路交通管理信息化建设存在的问题及对策分析[J];重庆交通学院学报;2006年02期
5 李水友;刘智勇;;城市交通感应控制综述[J];城市交通;2006年06期
6 黄中祥,沈文;拥挤收费与路径诱导间的协调分析[J];系统工程;2004年10期
7 钱勇生;王春雷;亢红霞;;基于闭合环路的自适应区域控制系统[J];系统工程;2007年05期
8 赵晓华;陈阳舟;石建军;高俊侠;;交通控制算法在Paramics交通仿真软件中的实现[J];公路交通科技;2006年06期
9 曹鹏;贾洪飞;隽志才;唐明;;高速公路入口匝道控制算法用户公平性分析[J];公路交通科技;2006年11期
10 王军;许宏科;蔡晓峰;孙磊;;基于BP神经网络的高速公路动态交通流预测[J];公路交通技术;2007年01期
中国重要会议论文全文数据库 前10条
1 李鑫;井元伟;;基于强化学习方法的ATM拥塞控制器的设计[A];2007中国控制与决策学术年会论文集[C];2007年
2 陈春林;;分层式强化学习研究进展[A];'2008系统仿真技术及其应用学术会议论文集[C];2008年
3 陈希;侯德文;朱祥玉;;基于强化学习的信息过滤模型[A];山东省计算机学会2005年信息技术与信息化研讨会论文集(二)[C];2005年
4 卓睿;陈宗海;陈春林;;强化学习在移动机器人导航上的应用[A];’2004系统仿真技术及其应用学术交流会论文集[C];2004年
5 蔡文澜;王俊生;陶军;徐惠斌;马宏绪;;一种PEGASUS策略梯度算法的理论及应用[A];中国仪器仪表学会第九届青年学术会议论文集[C];2007年
6 范跃祖;沈晓蓉;张海;何晓峰;;惯性技术在交通领域中的应用展望[A];2005年惯性技术科技工作者研讨会论文集[C];2005年
7 梁玉庆;吴敬一;关积珍;王义生;金成哲;;城市停车诱导显示牌空车位数发布的预测方法研究[A];第一届中国智能交通年会论文集[C];2005年
8 储浩;杨晓光;吴志周;;动态交通数据的预处理方法及应用[A];第一届中国智能交通年会论文集[C];2005年
9 杨晓光;袁长亮;林瑜;;TJATCMS——同济先进的交通控制与管理系统[A];第一届中国智能交通年会论文集[C];2005年
10 吕兵;翟润平;;基于类排队长度的交通干线模糊控制方法研究[A];第一届中国智能交通年会论文集[C];2005年
中国博士学位论文全文数据库 前10条
1 李威武;城域智能交通系统中的控制与优化问题研究[D];浙江大学;2003年
2 闻育;复杂多阶段动态决策的蚁群优化方法及其在交通系统控制中的应用[D];浙江大学;2004年
3 魏明;基于HLA的城市道路交通仿真系统研究[D];中国农业大学;2004年
4 栗红强;城市交通控制信号配时参数优化方法研究[D];吉林大学;2004年
5 杨庆芳;先进的交通管理系统关键理论与方法研究[D];吉林大学;2004年
6 王长缨;多agent协作团队的学习方法研究[D];国防科学技术大学;2004年
7 张俊友;高速公路交通控制与诱导方法的研究[D];中国农业大学;2005年
8 樊月珍;基于交通流的车辆动态路径诱导方法研究[D];中国农业大学;2005年
9 王夏黎;智能交通视频监视技术研究与应用[D];西北大学;2004年
10 吴明先;高速公路隧道集成化智能化监控技术与系统开发研究[D];长安大学;2004年
中国硕士学位论文全文数据库 前10条
1 杨晓芳;基于模糊控制的城市交通信号控制系统的研究[D];长安大学;2003年
2 徐德文;基于视频的智能交通监控系统技术研究[D];西北工业大学;2004年
3 高俊侠;城市单交叉口交通信号模糊控制系统的设计与仿真[D];北京工业大学;2004年
4 师富民;基于IC卡数据的公交OD矩阵构造方法研究[D];吉林大学;2004年
5 徐亮;动态交通信息检测器选择及其空间位置优化问题研究[D];吉林大学;2004年
6 周辉;城市交通系统控制信号优化调度研究[D];中南大学;2004年
7 闻帆;基于智能控制的城市交通线形控制系统研究[D];长安大学;2004年
8 许震洪;动态路径诱导系统的最优路径算法研究及相关软件实现[D];南京理工大学;2004年
9 肖业伟;城市智能交通信号控制系统的研究[D];湘潭大学;2004年
10 霍莹;交通微观仿真系统中信息获取及分析评价方法研究[D];浙江大学;2005年
【二级参考文献】
中国期刊全文数据库 前10条
1 吴越,周学农;智能协作技术在交通管理中的应用[J];系统工程;2001年01期
2 刘智勇,吴今培,李秀平,万百五;城市交通干线递阶模糊控制[J];公路交通科技;1997年03期
3 高阳,周志华,何佳洲,陈世福;基于Markov对策的多Agent强化学习模型及算法研究[J];计算机研究与发展;2000年03期
4 李宁,高阳,陆鑫,陈世福;一种基于强化学习的学习Agent[J];计算机研究与发展;2001年09期
5 季常煦,杨楠,周剑峰;城市交通共用信息平台数据管理技术[J];吉林大学学报(工学版);2005年06期
6 董超俊,刘智勇,邱祖廉;基于混沌遗传算法的区域交通计算机控制配时优化[J];计算机工程与应用;2004年29期
7 刘金琨,王树青;多智能体控制系统的设计与实现[J];控制理论与应用;1999年04期
8 刘智勇,李水友;城市交通信号的ANN自校正预测控制[J];控制理论与应用;2003年06期
9 欧海涛,张卫东,许晓鸣;基于RMM和贝叶斯学习的城市交通多智能体系统[J];控制与决策;2001年03期
10 沈国江,孙优贤;基于相序优化的多相位模糊交通控制[J];控制与决策;2002年S1期
【相似文献】
中国期刊全文数据库 前10条
1 李忠勤;范红刚;董金波;;单交叉口交通信号的模糊控制[J];黑龙江科技学院学报;2011年04期
2 王殿海;朱慧;别一鸣;魏强;;干线公交优先信号协调控制方法[J];东南大学学报(自然科学版);2011年04期
3 王彬;刘新;李月高;陈晓明;王华伟;;一种基于干线协调的公交信号优先方法及其验证分析[J];公路交通科技;2011年S1期
4 王亮;卢晓东;程韫琳;张军;戈美净;;基于快速退火和PSO算法的港口交通信号控制方法[J];中国科技信息;2011年18期
5 ;《北京交通大学学报》征稿简则[J];北京交通大学学报;2011年03期
6 熊荣华;;专家门诊[J];汽车维修与保养;2011年08期
7 郑生全;;市郊轨道交通信号系统方案研究市郊轨道交通信号系统方案研[J];现代城市轨道交通;2011年04期
8 倪金;陈阳舟;张利国;李宏峰;;两相邻路口的混杂自动机模型与信号协调控制[J];交通信息与安全;2011年03期
9 黄镇海;刘广萍;;信号控制在道路交通组织中的作用与分析[J];中国人民公安大学学报(自然科学版);2011年03期
10 唐军;;浅谈地下管线探测方法论证[J];中国地名;2011年06期
中国重要会议论文全文数据库 前10条
1 刘智勇;马凤伟;;城市交通信号的在线强化学习控制[A];第二十六届中国控制会议论文集[C];2007年
2 刘广萍;裴玉龙;冯岩;;城市干道交通信号优化控制方案研究[A];第七次城市道路与交通工程学术会议论文集[C];2002年
3 戴文涛;章友俊;;市政工程中的交通信号(监控)工程设计[A];中国电工技术学会水工业电工专委会第一届第二次年会暨技术交流会论文集[C];2001年
4 李建斌;高成修;;城市道路网络多交叉路口交通信号实时优化控制模型与算法[A];中国运筹学会第七届学术交流会论文集(下卷)[C];2004年
5 李强伟;;交叉口交通信号的可变相序策略[A];第六届全国信息获取与处理学术会议论文集(3)[C];2008年
6 吴宝宁;屈更生;杨少飞;;合理设置交通信号科学节能共建和谐社会[A];“建设资源节约型、环境友好型社会”高层论坛论文集[C];2007年
7 任海;魏学业;宁滨;;控制系统智能解码的研究[A];1999年中国智能自动化学术会议论文集(下册)[C];1999年
8 王新伟;王成道;;四叉路口车辆流模型及其交通信号灯的控制策略[A];1996年中国控制会议论文集[C];1996年
9 王新伟;王成道;;交叉路口车辆流模型及其交通信号灯的控制策略[A];2000年上海市系统仿真学会学术年会论文专辑[C];2000年
10 王芃;;货车专用通道隧道控制系统方案设计[A];中国电工技术学会水工业电工专委会第一届第二次年会暨技术交流会论文集[C];2001年
中国重要报纸全文数据库 前10条
1 通讯员 宁建新;交通信号“智能升级”二期正在筹建[N];南京日报;2010年
2 本报记者 范胜利;交通信号有待改进[N];华夏时报;2005年
3 陈莹石 张公辉 孙乃栋;“村村通”不能忽视交通信号“空白”[N];新华日报;2006年
4 陈镌娟;交通信号试行“串联”管控[N];厦门日报;2007年
5 郭静 通讯员 杨国平;二环内红绿灯下月全部联网[N];华夏时报;2004年
6 本报通讯员 王立;南京红绿灯将视路况自动变换[N];南京日报;2008年
7 复旦大学电光源研究所 林燕丹宋贤杰;节能高效,智能控制成两大趋势[N];消费日报;2008年
8 记者 吴宏雄;榕厦泉今年要开辟公交专道[N];福建日报;2007年
9 记者 陈国超;司机不按规定让行成事故主因[N];珠海特区报;2008年
10 记者 张朝辉 周亚梅;市区两成路口用上太阳能智能信号灯[N];保定日报;2007年
中国博士学位论文全文数据库 前6条
1 张萌萌;基于智能计算的城市交通信号控制系统研究[D];山东大学;2011年
2 陈小锋;城市交通信号动态优化控制技术研究[D];西北工业大学;2003年
3 袁满荣;昆明市主城区交通控制关键技术研究[D];吉林大学;2011年
4 黄辉先;城市交通信号优化控制方法的研究[D];西北工业大学;2000年
5 孙晋文;基于Agent的智能交通控制策略与可视化动态仿真研究[D];中国农业大学;2001年
6 杨希锐;考虑公交优先的城市道路时空资源优化方法研究[D];吉林大学;2011年
中国硕士学位论文全文数据库 前10条
1 张莹;自适应交通信号调度算法的建模、设计与实现[D];昆明理工大学;2012年
2 赖春晖;基于神经网络的交通信号模糊控制策略[D];暨南大学;2010年
3 颜培州;交通信号智能控制装置研究与开发[D];北方工业大学;2012年
4 彭杏波;基于FPGA的交通信号模糊控制器的设计[D];兰州理工大学;2011年
5 王光远;城市交通信号多目标自适应控制[D];大连理工大学;2010年
6 闫向磊;基于近似动态规划的城市交通信号优化控制算法研究[D];广西工学院;2011年
7 曹娟娟;城市干道交通信号协调优化控制研究[D];长沙理工大学;2012年
8 刘光柱;动态双向绿波优化控制研究[D];中国科学技术大学;2010年
9 龚莹莹;基于无线通信的城市道路交通信号控制系统[D];上海海事大学;2004年
10 史健强;交通流量检测技术及智能控制系统的研究[D];河北科技大学;2010年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026