一种用于低标注工业语料的知识图谱构建的关系抽取方法,首先,结合工业文本数据的上下文信息构建动态提示模板,引入语义协同机制增强模板标记间的语义关联;其次,结合特征对齐机制和分阶段课程学习,使模型能够逐步适应难度递增的多任务设置以及增强模型对语义差异的判别能力;最后,计算关系表征与标签表示的匹配概率,并通过交叉熵损失优化模型,预测最可能的关系类型。本发明充分利用了工业文本数据上下文的语义,结合分阶段的课程学习策略,使模型能够逐步适应关系抽取任务的复杂性,对标注数据规模要求低,关系抽取准确性高。
📄 202510779151X
📂 G06N5_022
👤 浙江工业大学之江学院
📅 2025-06-12
本发明公开了一种基于深度学习的多特征中文实体关系抽取方法,具体涉及自然语言处理技术领域,包括以下步骤:完成多特征中文词嵌入,使用BERT学习字符向量拼接词性标签和字符信息位置信息作为词嵌入向量输入送往多特征循环卷积网络网络,该神经网络包含中文的句子级特征和字符级特征,经过最大池化层,将其作为最终的分类向量送往softmax分类器。对于每个句子,概率最大的值对应的类别就是分类结果。本发明适用于中文文本的关系抽取,能够有效的针对中文语料的复杂关系。
📄 2022103862847
📂 G06F40_30
👤 浙江工业大学
📅 2022-04-13
本发明涉及一种基于依存关系抽取评价对象的方法。包括:S1、定义观点评价对象词与情感词之间的依存关系;S2、基于步骤S1定义的观点评价对象词与情感词之间的依存关系,构建观点评价对象词与情感词之间的直接依存关系模板和间接依存关系模板;S3、基于依存关系模板抽取观点评价对象的Bootstrapping算法。本发明方法相对于最新的方法性能上有较大提高。
📄 2017107837114
📂 G06F17_27
👤 闽江学院
📅 2017-09-01
融合BERT网络与位置特征信息的实体关系抽取方法及其应用,步骤如下:(1)实体数据采集;(2)数据处理;(3)提出模型结构;(4)离线训练;(5)在线测试;本发明公开一种融合BERT网络与位置特征信息的实体关系抽取方法。通过上述方法,解决了传统的实体抽取方法存在信息冗余、实体重叠、精确率不高等问题。本方法先利用BERT网络在文本上进行无监督预训练,然后在特定的下游任务上加入Bi‑LSTM进行微调。其次,在注意力机制的基础上添加位置特征信息,选择性地对某些信息进行关注。最后,实现实体关系识别与分类。本发明方法在公开数据集FB15K上进行对比实验,验证本发明方法具有更高的精确率和良好的应用前景。
📄 2022107917745
📂 G06F16_36
👤 辽宁大学
📅 2022-07-07
本发明提供了一种基于神经网络的实体关系抽取方法及装置,所述方法包括:对待处理的句子信息依次进行分词处理、实体识别、向量化处理、融合处理、全局平均池化处理、筛选处理、去噪处理、更新处理和降维处理以得到一个目标特征,然后根据所述目标特征就可以计算所述实体对的实体关系。本发明通过多方面、多角度挖掘句子及句子中实体间的关系,将这种多方面多角度的表示进行融合,进而更准确更全面地进行实体关系抽取,方法简便、高效,成本低廉,且能够在不同数据领域之间进行迁移;通过增加筛选处理滤除了对实体关系预测贡献不大的噪声特征,节省了后续的计算量,提高了抽取的效率。
📄 2019107222848
📂 G06F16_28
👤 上海智臻智能网络科技股份有限公司
📅 2019-08-06
本发明实施例提供一种基于知识增强的实体关系抽取方法及系统。该方法包括:获取经预处理的领域本体,以及未标注语料库;基于经预处理的领域本体和未标注语料库获取实体知识信息,通过实体知识信息计算得到标注语料库;基于实体知识信息分别提取实体特征、词特征和实体位置特征,进一步进行位置特征融合,得到融合特征;获取PCNN模型,基于融合特征训练PCNN模型,得到实体关系抽取模型;将实体关系抽取模型的结果放入PCNN模型中,通过预设分类器得到实体关系类型分类结果。本发明实施例基于现有领域本体和未标注语料库进行训练,训练后的模型可以提供实体对对应的关系类别,可广泛应用于自然语言相关的应用,提高了关系抽取的准确率。
📄 2020106578294
📂 G06F40_295
👤 北京工业大学
📅 2020-07-09
本发明公开了一种基于多个词嵌入和多头自注意力机制的关系抽取方法,包括以下步骤:S1、获取第一句子向量,将第一句子向量依次输入双向长短记忆网络层和注意力层,得到第一特征向量;S2、获取第二句子向量,将第二句子向量依次输入多窗口卷积层、多头自注意力层和最大池化层,得到第二特征向量;S3、将第一特征向量和第二特征向量均输入门控特征融合层,得到融合结果;S4、将融合结果输入Softmax层,得到关系预测结果,完成关系抽取。本发明使用字符嵌入的方式,不构建外部知识库也能有效地从字符层面和词组层面挖掘句子信息来充分表达句子语义,并且避免分词错误带来的影响、缓解一词多义难题。
📄 2023105945980
📂 G06F40_295
👤 成都信息工程大学
📅 2023-05-24
本发明公开了基于预训练语言模型和文本特征融合的空间关系抽取方法,首先对文本数据进行清洗和预处理,利用预训练语言模型实现单条或批量文本数据向低维字向量的转化,保证不同长度的文本数据转化而来的低维字向量维度能保持一致;然后由前馈神经网络构成的二分类器和字向量预测文本中地理实体、空间关系特征词的开始与结束位置,并依据开始、结束位置和字向量表示,通过池化方法来生成字符跨度表示;最后依据字符跨度表示来进行地理实体识别和空间关系分类两项任务,进而实现文本空间关系抽取。本发明很好地顾及了地理实体类型、空间关系特征词与空间关系抽取的关联关系,实现了面向文本的三元组形式空间关系抽取,具有较好的拓展性和普适性。
📄 2021113385426
📂 G06F16_31
👤 南京师范大学
📅 2021-11-12
本发明涉及生物医学关系抽取领域,具体涉及一种基于药物实体词掩码和Insert‑BERT结构的药物关系抽取方法;本发明在药物关系多分类任务及药物关系检测二分类任务均有全面提升;模型可视化及消融实验等结果表明提出方法能够在连续空间中提取不同层次、不同粒度的语义信息,并能够有效制约负样本的影响。
📄 2022100367886
📂 G16H70_40
👤 安庆师范大学
📅 2022-01-13
本发明公开了基于深度学习的地铁设计领域规范的实体间关系抽取方法,采用了一定的输出结构去捕捉存在于句子中的多实体之间的多关系,利用基于实体的掩码信息,屏蔽掉句子中实体之外的部分。同时,将句子中实体的相对位置信息融入到注意力计算过程中,加强了句子中“每个字”的注意力信息。参数选择方面开展了基于迭代次数、学习率、微调使用的BERT层数、最大长度、实体最大距离和最大关系数量等多个超参数的择优过程,以探究不同超参数对实验性能的影响角度和影响程度。方法对比部分选取了和本发明任务设定符合的R‑BERT,着重探究多关系输出结构的可用性,以及实体相对位置信息对任务性能提升的有效性。
📄 202110722239X
📂 G06F40_205
👤 西安理工大学
📅 2021-06-28
本发明公开了一种针对化工领域的文本实体关系抽取方法,具体处理步骤如下:1)数据采集步骤、2)数据标注步骤、3)关系抽取步骤、4)模型优化步骤;本发明通过网络爬虫和众包技术采集到相应数据集,并通过相应关系获取更合理、全面、高精准的一种针对化工领域的文本实体关系抽取方法。
📄 2020109787338
📂 G06F16_951
👤 青岛科技大学
📅 2020-09-17