发明专利已授权

一种基于多粒度跨模态对比学习的连续手语识别方法

📄 申请号：CN202510009489.7 📄 发布日：2026/08/04

著录项目信息

申请日

2025-01-03

公开号

CN119863842A

公开日

2025-04-22

申请人

浙江工业大学

法律状态

已下证

专利类型

发明

主分类号

G06V40_20

IPC 分类号

G06V40_20 , G06V20_40 , G06F18_213 , G06N3_0455 , G06N3_0895 , G06F40_284 , G06V10_44 , G06N3_0442 , G06N3_0464 , G06N3_045 , G06N3_047 , G06F18_22 , G06F40_30 ,

技术画像

所属领域

跨模态学习跨模态学习对比学习手语识别

应用场景

人机交互, 无障碍通信, 智能教育, 视频理解

AI 智能推荐 · 同申请人专利 · 搜索相似专利

摘要

一种基于多粒度跨模态对比学习的连续手语识别方法，首先充分挖潜手语视频与对应手语文本之间的隐性语义映射关系；接着利用多粒度跨模态对比机制去缓解冗余帧和语义无关标识词对跨模态对齐的潜在影响，通过粗粒度视频‑句子对比与细粒度帧‑词对比策略，从全局和局部角度对视觉与文本模态的特征进行有效对齐，通过跨粒度视频‑词对比和跨粒度帧‑句子对比策略来缓解冗余帧和语义无关标识词带来的语义干扰；最后利用视觉编码器中获得的视觉嵌入，通过解码器获得手语文本句子，作为预测的连续手语识别结果。本发明充分挖潜手语视频与对应手语文本之间的隐性语义映射关系，增强了手语模型对视觉上下文的语义理解，提高了手语识别的适用性和准确性。

权利要求书 (12项) 说明书附图

……

图1

图2

图3

法律状态时间线

用于舞台装备故障诊断的TI-TSDCN模型构建方法

当前第 / 件

一种具有双螺旋侧向结构的太阳能蒸发器及其制备方法

同领域国内专利 · IPC: (G06V40_20)

G06V40_10 G06V40_12 G06V40_13 G06V40_14 G06V40_145 G06V40_16 G06V40_18 G06V40_19 G06V40_20 G06V40_30 G06V40_40 G06V40_50 G06V40_70 覆盖13个领域

相似专利推荐 AI 驱动 · 同领域

暂无同领域相似专利推荐

议价

不含过户费

📋 交易方式： 委托待转让 📌 交易状态：在售 👁️ 浏览次数：10 ❤️ 收藏人数：93 📋 项目申报： 未申报

资金托管权属尽调包过户

🏢 淄博智来知识产权服务有限公司

✓ 企业认证✓ 手机绑定历史成交 0件好评率 98.5%

📊 出价记录 (3条)

王**¥-10万

李** 企业¥-8万

陈**¥-3万

查看全部出价

我要出价 (议价)