发明专利 已授权

基于多任务学习与层叠跨模态融合的多模态情感分析方法

📄 申请号:CN202210364764.3 📄 发布日:2026/06/16

著录项目信息

申请日
2022-04-08
公开号
CN114694076B
公开日
2024-11-08
申请人
浙江理工大学
法律状态
已下证
专利类型
发明
主分类号

技术画像

应用场景

社交媒体舆情分析, 人机交互, 智能客服, 心理健康监测, 多媒体内容理解

摘要

本发明属于自然语言处理领域。技术方案是:一种基于多任务学习与层叠跨模态融合的多模态情感分析方法,其具体执行步骤如下:步骤1:将原始视频拆剪为视频片段,提取可被模型识别的文本、音频与视觉特征;步骤2:将步骤1)提取的文本、音频和视觉特征首先输入至单模态特征提取模块,得到具有上下文语义信息的单模态隐藏层特征,再将这些单模态隐藏层特征输入至层叠跨模态特征融合模块,进行特征融合与提取,得到多模态高层特征;步骤3:将步骤2所得的多模态高层特征与单模态高层特征进行拼接,通过多层感知机,输出最终的情感分类结果。该方法能在保留模态异质性的前提下,连贯融合不同模态的特征,有效识别复杂场景下的多模态情感。
权利要求书 (12项) 说明书 附图

……

……

图1
图2
图3

法律状态时间线

相似专利推荐 AI 驱动 · 同领域

暂无同领域相似专利推荐
议价
不含过户费

📋 交易方式: 委托待转让 📌 交易状态: 在售 👁️ 浏览次数:59 ❤️ 收藏人数:93 📋 项目申报: 未申报

资金托管 权属尽调 包过户
🏢 淄博智来知识产权服务有限公司
✓ 企业认证✓ 手机绑定历史成交 0件好评率 98.5%

📊 出价记录 (3条)
王**¥-10万
李** 企业¥-8万
陈**¥-3万
查看全部出价