发明专利 已授权

一种基于跨模态连续时序约束的手语识别方法

📄 申请号:CN202411334582.7 📄 发布日:2026/08/04

著录项目信息

申请日
2024-09-24
公开号
CN119206869B
公开日
2026-04-24
申请人
浙江工业大学
法律状态
已下证
专利类型
发明
主分类号

技术画像

应用场景

手语翻译, 无障碍交流, 人机交互, 听障人士辅助, 视频理解

摘要

本发明公开了一种基于跨模态连续时序约束的手语识别方法,在训练手语视觉识别网络模型时引入辅助语言模型和跨模态连续时序约束模块,将视频样本输入至手语视觉识别网络模型,获取视觉特征,然后通过多层感知机投影得到对应的视觉中间特征;并将辅助语言序列,输入至辅助语言模型,获取语言特征,然后通过多层感知机投影得到对应的语言中间特征;然后将视觉中间特征和语言中间特征输入跨模态连续时序约束模块,计算模态间输出差异指标和跨模态连续约束损失,完成手语视觉识别网络模型的训练。从而通过训练完成的手语视觉识别网络模型来进行手语识别。本发明增强了算法的性能,从而推动人工智能在动作识别、手语识别等领域的应用。
权利要求书 (12项) 说明书 附图

……

……

图1
图2
图3

法律状态时间线

相似专利推荐 AI 驱动 · 同领域

暂无同领域相似专利推荐
议价
不含过户费

📋 交易方式: 委托待转让 📌 交易状态: 在售 👁️ 浏览次数:17 ❤️ 收藏人数:93 📋 项目申报: 未申报

资金托管 权属尽调 包过户
🏢 淄博智来知识产权服务有限公司
✓ 企业认证✓ 手机绑定历史成交 0件好评率 98.5%

📊 出价记录 (3条)
王**¥-10万
李** 企业¥-8万
陈**¥-3万
查看全部出价