发明专利已授权

一种多核处理器-单图形处理器的深度强化学习加速方法

📄 申请号：CN202011476497.6 📄 发布日：2025/12/10

著录项目信息

申请日

2020-12-15

公开号

CN112732436A

公开日

2021-04-30

申请人

电子科技大学

法律状态

已下证

专利类型

发明

主分类号

G06F9_50

IPC 分类号

G06F9_50 , G06T1_20 , G06N3_04 , G06N3_063 , G06N3_08 ,

技术画像

所属领域

多核处理器深度学习强化学习并行计算处理器深度强化学习多核处理器

应用场景

人工智能训练, 智能决策, 自动驾驶, 机器人控制, 游戏AI

AI 智能推荐 · 同申请人专利 · 搜索相似专利

摘要

本发明提出一种多核处理器‑单图形处理器的深度强化学习加速方法，能够在CPU+GPU的平台上，建立起特别基于PPO算法的深度强化学习框架，同时发明了一种加速收集采样与推理的流水线方法。在多核CPU上实现多环境进程模拟过程，每一核上安排多个环境进程。同时CPU起到控制数据的作用。在GPU上实现神经网络模型推理过程。CPU和GPU分别保存有动作网络、评估网络参数的内存空间，在环境和智能体交互的过程中，将每次的信息保存在CPU的经验信息池内存中，每隔一定循环，CPU根据算法的截断参数和筛选条件，从自身的经验信息池内存中提取batch规模的数据进行训练。本发明通过负载平衡，当CPU单核堆叠环境进程的模拟时间与神经网络模型推理时间相同时，能够实现环境采样与动作推理并行执行的流水线结构：通过并行半个CPU模拟器和半个GPU推理的运行，并在数据传输时准备好下一次半个CPU模拟器和半个GPU推理过程，可以进一步加速强化学习速度，达到比传统方法近2倍的整体训练速度。

权利要求书 (12项) 说明书附图

……

图1

图2

图3

法律状态时间线

20220422

✅ 授权

20210521

?? 实质审查的生效：

20210430

📄 公开

一种基于增强学习的FPGA互联资源配置生成方法

当前第 / 件

一种芯片散热器

同领域国内专利 · IPC: (G06F9_50)

G06F9_22 G06F9_26 G06F9_30 G06F9_302 G06F9_32 G06F9_345 G06F9_38 G06F9_44 G06F9_4401 G06F9_445 G06F9_448 G06F9_45 G06F9_451 G06F9_455 G06F9_46 G06F9_48 G06F9_50 G06F9_52 G06F9_54 覆盖19个领域

议价

不含过户费

📋 交易方式： 委托待转让 📌 交易状态：在售 👁️ 浏览次数：109 ❤️ 收藏人数：93 📋 项目申报： 未申报

资金托管权属尽调包过户

🏢 淄博智来知识产权服务有限公司

✓ 企业认证✓ 手机绑定历史成交 0件好评率 98.5%

📊 出价记录 (3条)

王**¥-10万

李** 企业¥-8万

陈**¥-3万

查看全部出价

我要出价 (议价)

一种多核处理器-单图形处理器的深度强化学习加速方法

著录项目信息

技术画像

所属领域

应用场景

摘要

法律状态时间线

同领域国内专利 · IPC: (G06F9_50)

相似专利推荐 AI 驱动 · 同领域

一种基于CUDA的网络入侵检测并行化加速方法

一种基于随机与并行计算策略的RTL级电路可靠性度量方法

一种基于并行计算的像素筛查方法

服务项目

资源中心

关于柿子坊