发明专利已授权

一种基于跨模态特征互补和有向图学习的多模态对话情感识别方法

📄 申请号：CN202411291553.7 📄 发布日：2026/08/06

著录项目信息

申请日

2024-09-14

公开号

CN119181045B

公开日

2025-04-04

申请人

成都信息工程大学

法律状态

已下证

专利类型

发明

主分类号

G06V20_40

IPC 分类号

G06V20_40 , G06V10_80 , G06V10_764 , G06V10_82 , G06N3_0464 , G06N3_045 , G06N3_08 , G06F16_901 , G06F16_783 ,

技术画像

所属领域

多模态情感识别多模态情感识别跨模态特征融合图神经网络

应用场景

人机交互, 智能客服, 情感计算, 社交媒体舆情分析, 心理健康监测

AI 智能推荐 · 同申请人专利 · 搜索相似专利

摘要

本发明公开了一种基于跨模态特征互补和有向图学习的多模态对话情感识别方法，涉及对话情感识别技术领域，所述方法包括：获取视频对话数据，对所述视频对话数据进行特征提取，获得第一特征；对所述第一特征进行编码，获得第二特征；基于所述第二特征构建跨模态异构图，基于所述跨模态异构图获得注意力权重；基于所述注意力权重对所述跨模态异构图进行更新，获得最终跨模态异构图，提取所述最终跨模态异构图的互补特征信息，基于所述互补特征信息，对所述最终跨模态异构图的特征进行融合获得增强特征；基于所述增强特征构建多模态有向图；基于所述多模态有向图获得情感特征，将所述情感特征传输至预训练情感分类器进行预测，获得预测情感结果，可以解决现有ERC方法中多模态数据融合中的冲突和异构性、以及忽略各模态之间的相互作用，导致模态信息丢失、模态融合不充分的问题。

权利要求书 (12项) 说明书附图

……

图1

图2

图3

法律状态时间线

20250404

✅ 授权

20250110

?? 实质审查的生效：

20241224

📄 公开

基于稀疏注意力机制的多模态脑肿瘤图像分割系统

当前第 / 件

一种基于多层次特征融合的多模态抑郁症识别系统

同领域国内专利 · IPC: (G06V20_40)

G06V20_00 G06V20_05 G06V20_10 G06V20_13 G06V20_17 G06V20_20 G06V20_30 G06V20_40 G06V20_50 G06V20_52 G06V20_54 G06V20_56 G06V20_58 G06V20_59 G06V20_60 G06V20_62 G06V20_64 G06V20_68 G06V20_69 G06V20_70 覆盖20个领域

相似专利推荐 AI 驱动 · 同领域

暂无同领域相似专利推荐

议价

不含过户费

📋 交易方式： 委托待转让 📌 交易状态：在售 👁️ 浏览次数：9 ❤️ 收藏人数：93 📋 项目申报： 未申报

资金托管权属尽调包过户

🏢 淄博智来知识产权服务有限公司

✓ 企业认证✓ 手机绑定历史成交 0件好评率 98.5%

📊 出价记录 (3条)

王**¥-10万

李** 企业¥-8万

陈**¥-3万

查看全部出价

我要出价 (议价)