咨询电话:13280638997
传真:0533-3110363
邮箱:kefu@shizifang.com
摘 要:本发明提供一种基于超图神经网络的多模态对话情绪识别方法及系统,涉及对话情绪识别领域。该基于超图神经网络的多模态对话情绪识别方法,包括以下步骤:以对话中的话语为节点,分别构建上下文文本、图像、语音模态内超图及模态间超图,使用超图卷积神经网络对超图进行聚合得到模态内和模态间节点特征表示,将节点特征表示拼接得到最终特征表示,将特征表示输入到情感分类器中,得到该话语的情绪类别。本方法采用超图神经网络来建模对话上下文和模态之间的关系,以弥补图神经网络只能捕获成对关系致使高阶信息丢失的缺陷,同时使用超边融合自适应策略和超图卷积神经网络以融合模态信息使得它们能够互相补充,从而提高整体的性能和准确性。
著 录 项:
专利/申请号: | CN202410296410.9 | 专利名称: | 一种基于超图神经网络的多模态对话情绪识别方法及系统 |
申请日: | 2024-03-15 | 申请/专利权人 | 南京信息工程大学 |
专利类型: | 发明 | 地址: | 江苏省南京市浦口区宁六路219号 |
专利状态: | 已下证 查询审查信息 | 分类号: | G06F18/2431搜分类 计算机硬件搜索 |
公开/公告日: | 2024-06-07 | 转让价格: | 面议 |
公开/公告号: | CN117892237B | 交易状态: | 等待洽谈 搜索相似专利 |
交易方 | 企业 | 个人 |
买家 | 营业执照副本复印件(需盖公章) | 身份证复印件(签字) |
专利转让委托书(需盖公章)一式两份 | 专利转让委托书(需签字)一式两份 | |
专利转让协议(需盖公章)一式两份 | 专利转让协议(需签字)一式两份 | |
卖家 | 营业执照副本复印件(需盖公章) | 身份证复印件(需申请人签字) |
解除代理委托书(需盖公章)一式两份(如专利通过代理机构申请) | 解除代理委托书(需签字)一式两份(如专利通过代理机构申请) | |
专利转让协议(需盖公章)一式两份 | 专利转让协议(需签字)一式两份 | |
专利请求书或手续合格通知书、授权通知书复印件 | 专利请求书或手续合格通知书、专利授权通知书复印件 | |
专利证原件(若授权下证) | 专利证原件(若授权下证) |
日期 | 法律信息 | 备注 |