发明专利 已授权

基于Gate-Mixup数据增强的知识蒸馏化工文本分类方法及装置

📄 申请号:CN202211156215.3 📄 发布日:2026/03/18

著录项目信息

申请日
2022-09-22
公开号
CN115481249B
公开日
2025-07-01
申请人
淮安华凯教育科技有限公司
法律状态
已下证
专利类型
发明
主分类号

技术画像

应用场景

化工技术情报分析, 专利自动分类, 文献分类, 工业文本挖掘

摘要

本发明公开一种基于Gate‑Mixup数据增强的知识蒸馏化工文本分类方法及装置,首先同时对图神经网络教师模型以及Transformer学生模型进行初始训练;然后进行一阶段蒸馏训练,通过指标函数与门控单元对教师模型输出进行筛选,满足预设条件,则直接作为logits输入蒸馏损失函数指导学生模型,否则对文本表示进行数据增强,最后将输出残差叠加输入蒸馏损失函数指导学生模型训练;将教师模型与学生模型角色进行对调作为二阶段蒸馏训练,循环执行上述一阶段和二阶段蒸馏训练,最终获得蒸馏好的学生模型;实际应用时,将化工文本样本输入学生模型,获得预测输出文本类别。本发明通过构建的数据增强方法有效增强相互学习困难样本知识蒸馏效果,提升学生模型文本分类性能。
权利要求书 (12项) 说明书 附图

……

……

图1
图2
图3

法律状态时间线

20260116
?? 专利权的转移 :
20250701
✅ 授权
20230103
?? 实质审查的生效 :
20221216
📄 公开

相似专利推荐 AI 驱动 · 同领域

暂无同领域相似专利推荐
议价
不含过户费

📋 交易方式: 委托待转让 📌 交易状态: 在售 👁️ 浏览次数:77 ❤️ 收藏人数:93 📋 项目申报: 未申报

资金托管 权属尽调 包过户
🏢 淄博智来知识产权服务有限公司
✓ 企业认证✓ 手机绑定历史成交 0件好评率 98.5%

📊 出价记录 (3条)
王**¥-10万
李** 企业¥-8万
陈**¥-3万
查看全部出价