基于D3QN的交通信号控制策略

基于D3QN的交通信号控制策略

论文摘要

交叉口是城市路网的核心和枢纽,合理优化交叉口的信号控制可以极大地提高城市交通体系的运行效率,而将实时交通信息作为输入并动态调整交通信号灯的相位时间成为了当前研究的重要方向。文中提出了一种基于D3QN(Double Deep Q-Learning Network with Dueling Architecture)深度强化学习模型的交通信号控制方法,其利用深度学习网络,结合交通信号控制机构成了一个用于调整交叉口信号控制策略的智能体,然后采用DTSE(离散交通状态编码)方法将交叉口的交通状态转换为由车辆的位置和速度信息所组成的二维矩阵,通过深度学习对交通状态特征进行高层抽象表征,从而实现对交通状态的精确感知。在此基础上,通过强化学习来实现自适应交通信号控制策略。最后,利用交通微型仿真器SUMO进行仿真实验,以定时控制和感应控制方法作为对照实验,结果表明文中提出的方法得到了更好的控制效果,因此是可行且有效的。

论文目录

  • 1 引言
  • 2 相关工作及其存在的问题
  • 3 基于D3QN的交通控制优化方法
  •   3.1 状态空间st
  •   3.2 动作空间at
  •   3.3 奖励值rt
  •   3.4 动作选择策略
  •   3.5 D3QN算法
  • 4 仿真实验设计及实验结果分析
  •   4.1 仿真实验设计
  •   4.2 仿真实验结果分析
  • 文章来源

    类型: 期刊论文

    作者: 赖建辉

    关键词: 智能交通,强化学习,深度学习,深度强化学习,交通信号控制

    来源: 计算机科学 2019年S2期

    年度: 2019

    分类: 信息科技,工程科技Ⅱ辑

    专业: 公路与水路运输,自动化技术

    单位: 浙江工业大学计算机科学与技术学院

    分类号: TP18;U491.54

    页码: 117-121

    总页数: 5

    文件大小: 846K

    下载量: 149

    相关论文文献

    标签:;  ;  ;  ;  ;  

    基于D3QN的交通信号控制策略
    下载Doc文档

    猜你喜欢