发明专利已授权

一种基于双经验池DQN的交通信号灯控制方法

📄 申请号：CN202210415387.1 📄 发布日：2026/08/10

著录项目信息

申请日

2022-04-20

公开号

CN114613169B

公开日

2023-02-28

申请人

南京信息工程大学

法律状态

已下证

专利类型

发明

主分类号

G08G1_08

IPC 分类号

G08G1_08 , G08G1_01 , G06N3_047 , G06N3_0442 , G06N3_08 ,

技术画像

所属领域

其他分类其他

应用场景

智能交通, 城市交通信号管理, 交通拥堵治理, 智慧城市

AI 智能推荐 · 同申请人专利 · 搜索相似专利

摘要

本发明公开了一种基于双经验池DQN的交通信号灯控制方法，包括：1、建立基于DQN算法的交通信号灯控制主网络和目标值网络；2、初始化算法相关参数，采集交通路口的路况信息，建立状态值st；3、将st输入主网络中，选择Q值最大值的动作at；4、执行at并计算奖励rt和状态st+1；将(st,at,rt,st+1)存储到第一经验池；5、如果奖励rt大于历史经验平均奖励将(st,at,rt,st+1)存储到第二经验池；6、生成随机数P，以概率1‑P选择第一经验池，以概率P选择第二经验池，在选中的经验池中随机抽样，通过最小化损失函数训练主网络的参数；S7、定时更新目标值网络的参数；根据当前路况信息更新st，跳转至步骤3继续执行。该方法能够使算法快速收敛，获得的交通信号灯控制策略快速优化。

权利要求书 (12项) 说明书附图

……

图1

图2

图3

法律状态时间线

20230228

✅ 授权

20220628

?? 实质审查的生效：

20220610

📄 公开

一种基于记忆网络的深度强化学习交通信号控制方法

当前第 / 件

一种FeCo合金包覆泡沫镍吸波材料的制备方法

同领域国内专利 · IPC: (G08G1_08)

G08G1_00 G08G1_005 G08G1_01 G08G1_015 G08G1_017 G08G1_02 G08G1_04 G08G1_042 G08G1_048 G08G1_052 G08G1_054 G08G1_056 G08G1_065 G08G1_07 G08G1_08 G08G1_081 G08G1_083 G08G1_085 G08G1_087 G08G1_09 G08G1_095 G08G1_0955 G08G1_0962 G08G1_0965 G08G1_0967 G08G1_0968 G08G1_0969 G08G1_097 G08G1_123 G08G1_127 G08G1_13 G08G1_133 G08G1_14 G08G1_16 覆盖34个领域

相似专利推荐 AI 驱动 · 同领域

暂无同领域相似专利推荐

议价

不含过户费

📋 交易方式： 委托待转让 📌 交易状态：在售 👁️ 浏览次数：5 ❤️ 收藏人数：93 📋 项目申报： 未申报

资金托管权属尽调包过户

🏢 淄博智来知识产权服务有限公司

✓ 企业认证✓ 手机绑定历史成交 0件好评率 98.5%

📊 出价记录 (3条)

王**¥-10万

李** 企业¥-8万

陈**¥-3万

查看全部出价

我要出价 (议价)