咨询电话：13280638997
传真：0533-3110363
邮箱：kefu@shizifang.com
24小时咨询热线13280638997
24小时咨询热线著 录 项 目：
| 专利/申请号： | CN202110814546.0 | 专利名称： | 基于词格和相对位置嵌入的中文问题生成统一预训练方法 |
| 申请日： | 2021-07-19 | 申请/专利权人 | 西安理工大学 |
| 专利类型： | 发明 | 地址： | 陕西省西安市碑林区金花南路5号 |
| 专利状态： | 已下证 查询审查信息 | IPC分类号： | G06F40/242 分类检索 |
| 公开/公告日： | 2024-09-20 | 转让价格： | 【平台担保交易】 |
| 公开/公告号： | CN113743095B | 交易状态： | 等待洽谈 搜索相似专利 |
| 浏览量： | 32 | 所属领域： | 中文自然语言处理 人工智能专利转让搜索 |
摘 要：本发明公开了基于词格和相对位置嵌入的中文问题生成统一预训练方法，具体包括如下步骤：对Robert参数进行领域预训练；使用半监督半人工的方式，快速且准确的生成目标领域词典；根据词典将输入中字和词的相对位置信息融入Transformer层；新建的Transformer层，通过大量开放域问答数据，进行任务预训练；生成问题的训练和推断。本发明在模型输入中加入了每个单子和领域词汇的相对位置信息，模型不仅能学到更多的位置关系也可以在针对目标领域输入生成问题时具有更好的效果。领域预训练和任务预训练也被应用于模型用于增强模型在特定领域的推断能力。基于同样的问答数据集本发明提出模型具有更好的效果。
| 交易方 | 企业 | 个人 |
| 买家 | 营业执照副本复印件（需盖公章） | 身份证复印件（签字） |
| 专利转让委托书（需盖公章）一式两份 | 专利转让委托书（需签字）一式两份 | |
| 专利转让协议（需盖公章）一式两份 | 专利转让协议（需签字）一式两份 | |
| 卖家 | 营业执照副本复印件（需盖公章） | 身份证复印件（需申请人签字） |
| 解除代理委托书（需盖公章）一式两份（如专利通过代理机构申请） | 解除代理委托书（需签字）一式两份（如专利通过代理机构申请） | |
| 专利转让协议（需盖公章）一式两份 | 专利转让协议（需签字）一式两份 | |
| 专利请求书或手续合格通知书、授权通知书复印件 | 专利请求书或手续合格通知书、专利授权通知书复印件 | |
| 专利证原件（若授权下证） | 专利证原件（若授权下证） |
| 日期 | 法律信息 | 备注 |
| 申请号 | 专利名称 | 发布日期 |
| 2020110029054 | 【发明】一种人工智能辅助写作系统 | 2025/10/24 |
| 2020113397772 | 【发明】订单信息的校正方法、装置、设备及存储介质 | 2025/10/22 |
| 2018114594287 | 【发明】图像的描述语句定位方法及装置、电子设备和存储介质 | 2025/10/22 |
| 2019101099835 | 【发明】一种跨模态信息检索方法、装置和存储介质 | 2025/10/22 |
| 2021102811612 | 【发明】用户亲密度的确定方法及装置、电子设备和存储介质 | 2025/10/22 |
| 2022103652995 | 【发明】事件关系识别方法、装置、计算机设备以及存储介质 | 2025/10/22 |
| 2024109953764 | 【发明】一种基于大语言模型的案由模版结构创建系统及方法 | 2025/10/21 |
| 2020113314981 | 【发明】一种基于依存语义注意力机制的词对上下位关系训练方法 | 2025/10/21 |
| 2024104175776 | 【发明】一种基于双向序列生成的汉语篇章连接词识别方法 | 2025/10/17 |
| 2023111390999 | 【发明】基于短语交互的隐式篇章关系识别方法和系统 | 2025/10/17 |
