本发明公开了基于预训练模型和自动感受野的关键词抽取方法与系统，属于自然语言中文本关键词抽取领域。首先构建输入嵌入模块，对文档序列进行词元化，构建停用词集合和遮罩矩阵。其次通过构建感受野和句向量生成网络，根据分别生成感受野矩阵和句向量。然后利用句向量和感受野矩阵生成词排序矩阵，经过注意力评分层，得到候选词分数矩阵，并进一步获取分数序列以及长度序列。最后通过分数序列和长度序列产生的元素对，完成关键词抽取，并对网络模型进行训练。本发明帮助关键词抽取模型融合候选词筛选和候选词排序两项任务，并具有更好的鲁棒性和自适应能力。
📄 2022116945975
📂 G06F40_279
👤 杭州电子科技大学
📅 2022-12-28
本发明涉及一种文档级别关系抽取方法、装置、电子设备及存储介质。本发明所述的文档级别关系抽取方法包括：获取待抽取关系的若干实体对和文档；将所述实体对和所述文档顺次输入嵌入层和编码层，获取隐藏状态向量；根据所述文档中的每个实体与其他实体之间的实体间关系，计算文档中每个词的注意力；根据每个实体对应的实际提及集合和所述文档对应的隐藏状态向量相乘，得到每个实体对的向量；使用图注意力机制，分别得到每个实体对中头实体和尾实体的向量；对于每一个实体对，将所述头实体向量和所述尾实体向量输入输出层，经过输出层得到概率最高的实体关系作为输出。本发明所述的文档级别关系抽取方法，解决了某些实体提及可能与关系无关的问题。
📄 2022109331682
📂 G06F40_279
👤 华南师范大学
📅 2022-08-04
本发明公开一种基于主题语义信息的关键词向量化方法及其应用，具体包括：首先利用Sentence‑BERT模型为每个文档生成具有文档语义信息的向量；再通过UMAP降维算法对生成的文档向量进行降维并突显局部语义特征；然后，在降维后的文档向量上进行HDBSCAN主题聚类，并将每个文档归类到一个或多个主题中；最后，利用文档和主题之间的关系，计算主题中每一个关键词的主题词频率‑逆主题频率(TTF‑ITF)得分，对该关键词与每个主题的主题词频率‑逆主题频率(TTF‑ITF)得分进行合并，生成最终的关键词向量。本发明实现高精度表征主题语义信息的关键词向量化，可应用于主题词提取、文本分类和文档检索。
📄 2021116592095
📂 G06F40_279
👤 南京邮电大学
📅 2021-12-30
一种中文医学实体关系联合抽取方法，包括：医疗关系嵌入表示模块、医疗文本中头实体和尾实体的头尾位置获取模块、医疗文本字词向量及其相对距离计算模块、词汇增强后的字向量输出模块、医疗文本的关系预测模块、医疗文本的字符对向量生成模块、主谓宾三元组输出模块、联合抽取模型训练模块、联合抽取模型的F1分数计算模块、循环训练联合抽取模型模块、医疗文本实体关系获取模块。本发明还包括一种中文医学实体关系联合抽取系统。本发明解决了中文医疗文本中复杂语句的实体嵌套和关系重叠问题，缓解了TPLinker解码矩阵的稀疏，提升了联合抽取模型的收敛速度，通过词汇增强编码单元缓解了中文医疗文本中存在许多专业词汇即使结合上下文也无法准确识别的难题。
📄 2021112033133
📂 G06F40_279
👤 浙江工业大学
📅 2021-10-15
本发明公开了一种基于关联关系分析的课程推荐方法，从中提取出知识概念以及用户与其他实体之间的关联矩阵如用户与其他实体的关联矩阵，通过元路径得到知识概念和用户对应的邻接矩阵，通过对用户的元路径邻接矩阵构建实体的关联关系图，并经过关联关系特征提取模块得到用户的关联关系特征，将知识概念与用户在不同元路径下的实体表示进行加权合并，得到最终的用户实体表示与课程知识概念实体表示，最后通过矩阵分解的方式获取最终的用户与知识概念的评分矩阵，根据评分矩阵对用户进行课程推荐，提高了推荐的准确性。
📄 2021103012975
📂 G06F40_279
👤 浙江工业大学
📅 2021-03-22
本发明涉及移动互联网信息安全领域，涉及一种基于边缘计算的移动终端敏感词识别方法、装置及系统；所述方法包括移动终端输入待识别的文本信息；移动终端基于本地词库，采用双数组字典树匹配过滤算法对输入的文本信息进行过滤，并将过滤后的文本信息发送至边缘计算节点；边缘计算平台将各个边缘计算节点的文本信息输入到训练完成后的深度学习模型中，识别出文本信息中的敏感词集，并形成边缘词库；边缘计算平台通过边缘计算节点在一定时间间隔后将边缘词库发送至移动终端；移动终端接收边缘节点下发的边缘词库，对本地词库进行更新；本发明改进了双数组算法，能够有效降低匹配过滤算法的内存开销，可以使其良好的运行于资源有限的移动终端平台。
📄 2020101848051
📂 G06F40_279
👤 重庆宗灿科技发展有限公司
📅 2020-03-17
本申请涉及人工智能，提供一种基于模型的缩写数据的实体识别方法、装置和计算机设备，获取医学文本；查找医学文本中出现的所有缩写‑全称对数据；判断指定缩写‑全称对中的第一全称，是否为指定医学字典中第一医学概念的医学别名；若否，判断指定缩写‑全称对中的第一缩写是否为指定医学字典中第二医学概念的医学别名；若是，获取第二医学概念包含的所有医学别名；将第一全称与指定医学别名输入至孪生网络模型中，获取第一全称与指定医学别名的指定相似度数值；根据指定相似度数值，判断在第二医学概念包含的所有医学别名中是否存在与第一全称意思相同的医学别名；若是，判定第一缩写属于医学实体。本申请提高了缩写数据的实体识别的准确性。
📄 2020109416304
📂 G06F40_279
👤 平安科技(深圳)有限公司
📅 2020-09-09
本发明公开了一种基于多维动态候选集的文本纠错方法，包括如下步骤：步骤1、从汉字识别文本纠错的SIGHAN系列数据集中获取输入文本S；步骤2、对于输入文本S，通过文本编码器编码将token嵌入、segment嵌入、position嵌入、词性嵌入通过向量加法进行合并，得到输入文本的最终嵌入表示，以及相应的嵌入序列E；步骤3、将得到的嵌入序列E，输入到检错网络，并利用注意力机制来检错可能发生错的字符，输出错误序列L以及错误序列L的错误概率P；步骤4、将错误序列L和嵌入序列E输入到语言模型中，使用软遮盖编码将两者组合成SOFT＇编码；步骤5、将SOFT＇编码作为输入，利用预训练的BERT语言纠错模块和特征融合模块组成的纠错网络对错误字符进行纠正，最终输出正确字符。
📄 2024111474679
📂 G06F40_279
👤 杭州电子科技大学
📅 2024-08-21
本发明涉及一种基于深度学习的文本内容安全检测方法。该方法包括算法部分，对应的检测器是一个卷积神经网络框架。本发明算法整体架构采用的是长短记忆网络LSTM，此结构是一种循环神经网络，实现简单并具有长期记忆功能；在此基础上，还加入了注意力机制，此机制可将计算机有限的资源高效利用，并且使用时能并行，可在减少网络参数的情况下提升准确率。另外，本发明的算法部分还加入了残差结构，使得学习结果对网络权重的波动变化更加敏感，同时残差结果对数据的波动更加敏感。本方法提出基于深度的方法，通过改变模型参数，可构建出不同的文本内容检测器，剔除有害信息，为人们提供一个优质、安全的网络环境。
📄 2021110842735
📂 G06F40_279
👤 燕山大学
📅 2021-09-14
本发明提供一种段落大意引导的汉语篇章结构分析方法，应用于段落大意引导的汉语篇章结构分析模型，该模型包括融合词信息的字级编码模块，文本块级稀疏Transformer编码模块、基于指针网络的解码模块、基本文本摘要语料的预训练模块和基于篇章语料的训练模块。本发明充分利用了汉语篇章结构的特性，实质性地提高了汉语篇章结构分析的性能，具有较强的实用价值，该方法为端到端的自顶向下分析方法，不需要以切分好的基本篇章单元作为输入，有效地避免了错误传播问题，提高了方法的适用性；本发明能较好地学习输入文本的段落大意，并把这种全局信息和段落中文本块的表示等局部信息有效融合，以引导整个篇章结构树的构建，达到提高分析性能的目的。
📄 2024105661752
📂 G06F40_279
👤 华东交通大学
📅 2024-05-09
本发明涉及一种智慧物流控制系统的正则表达式测试方法和系统，属于电子技术领域。本发明基于给定的正则表达式识别得到元字符后，确定元字符的优先级关系，并基于优先级关系构建优先级表，接着，基于优先级表，将正则表达式转换为后缀形式的正则表达式，以构造抽象语法树，然后，遍历抽象语法树，并在遍历过程中对访问到的结点创建字符串集合，提取字符串集合中与抽象语法树根结点对应的字符串集合，并进行整理得到测试字符串，最后，基于测试字符串正则表达式的测试，能够在提高正则表达式描述效率的同时，提高正则表达式测试的正确性，进而能够为智慧物流机器人控制系统的有效和可靠应用提供支持。
📄 2023100634913
📂 G06F40_279
👤 华侨大学
📅 2023-02-06
本发明公开了一种汽车智能网联感性需求趋势分析及突变检测方法，包括：获取用户评论数据，构建评论数据集，训练Bi‑LSTM神经网络，计算待分析的时间段内的各条评论情感值；定义NSF表示某时间区间内的标准化情感频率值，计算待分析时间段内的NSF；校验NSF值的趋势稳定性，若得到“稳定”结果，此时视NSF值在所有待分析的评论发布时间所构成的时间序列上保持稳定，则不进行趋势分析；而对于结果为“不稳定”的序列进一步进行趋势检验，得到上升或下降趋势的检验结果；通过多种方法进行待分析的时间段内的突变分析，确定可信突变时间。
📄 2022109167086
📂 G06F40_279
👤 广东工业大学
📅 2022-08-01
柿子坊 · 知识产权运营
柿子坊知识产权运营平台