基于深度强化学习的城市交通信号控制算法

基于深度强化学习的城市交通信号控制算法

论文摘要

针对城市交通信号控制中如何有效利用相关信息优化交通控制并保证控制算法的适应性和鲁棒性的问题,提出一种基于深度强化学习的交通信号控制算法,利用深度学习网络构造一个智能体来控制整个区域交通。首先通过连续感知交通环境的状态来选择当前状态下可能的最优控制策略,环境的状态由位置矩阵和速度矩阵抽象表示,矩阵表示法有效地抽象出环境中的主要信息并减少了冗余信息;然后智能体以在有限时间内最大化车辆通行全局速度为目标,根据所选策略对交通环境的影响,利用强化学习算法不断修正其内部参数;最后,通过多次迭代,智能体学会如何有效地控制交通。在微观交通仿真软件Vissim中进行的实验表明,对比其他基于深度强化学习的算法,所提算法在全局平均速度、平均等待队长以及算法稳定性方面展现出更好的结果。其中,与基线相比,平均速度提高9%,平均等待队长降低约13.4%。实验结果证明该方法能够适应动态变化的复杂的交通环境。

论文目录

  • 0 引言
  • 1 深度强化学习
  •   1.1 强化学习
  •   1.2 深度学习
  • 2 基于深度强化学习的交通信号控制算法
  •   2.1 状态表示
  •   2.2 动作集合
  •   2.3 奖赏值函数
  •   2.4 交通信号控制智能体
  •   2.5 学习算法
  • 3 实验
  •   3.1 实验设置
  •   3.2 超参数优化
  •   3.3 性能提升
  • 4 结语
  • 文章来源

    类型: 期刊论文

    作者: 舒凌洲,吴佳,王晨

    关键词: 深度学习,卷积神经网络,强化学习,交通信号控制

    来源: 计算机应用 2019年05期

    年度: 2019

    分类: 信息科技,工程科技Ⅱ辑

    专业: 公路与水路运输,自动化技术

    单位: 电子科技大学信息与软件工程学院

    基金: 国家自然科学基金资助项目(61503059)~~

    分类号: U491.54;TP18

    页码: 1495-1499

    总页数: 5

    文件大小: 805K

    下载量: 977

    相关论文文献

    标签:;  ;  ;  ;  

    基于深度强化学习的城市交通信号控制算法
    下载Doc文档

    猜你喜欢