发明专利 已授权

多模型知识蒸馏方法及装置、电子设备和存储介质

📄 申请号:CN201810940904.0 📄 发布日:2025/10/22

著录项目信息

申请日
2018-08-17
公开号
CN110837761B
公开日
2023-04-07
申请人
北京市商汤科技开发有限公司
法律状态
已下证
专利类型
发明
主分类号

技术画像

应用场景

AI模型部署, 边缘计算, 自然语言处理, 计算机视觉

摘要

本公开涉及一种多模型知识蒸馏方法及装置、电子设备和存储介质,所述方法包括:提取训练图像的特征得到训练数据;将所述训练数据输入教师模型所包括的多个子模型进行运算,根据所述多个子模型输出的子特征得到所述教师模型输出的第一特征;将所述训练数据输入学生模型进行运算,得到所述学生模型输出的第二特征;根据所述第一特征和所述第二特征确定所述学生模型的损失函数;根据所述损失函数对所述学生模型进行反向传播。本公开实施例利用教师模型中的多个子模型,可以得到训练数据中的不同特征表示,学生模型可以利用知识蒸馏的方式学习到教师模型中的特征,克服单个模型表达能力有限的问题,提高学生模型的模型精度。
权利要求书 (12项) 说明书 附图

……

……

图1
图2
图3

法律状态时间线

相似专利推荐 AI 驱动 · 同领域

暂无同领域相似专利推荐
议价
不含过户费

📋 交易方式: 委托待转让 📌 交易状态: 在售 👁️ 浏览次数:127 ❤️ 收藏人数:93 📋 项目申报: 未申报

资金托管 权属尽调 包过户
🏢 淄博智来知识产权服务有限公司
✓ 企业认证✓ 手机绑定历史成交 0件好评率 98.5%

📊 出价记录 (3条)
王**¥-10万
李** 企业¥-8万
陈**¥-3万
查看全部出价