一种网页评论内容的抽取方法,包括以下步骤:获取网页源码;将网页源码转换成DOM树结构,基于位置、文本长度和布局特征对DOM树进行剪枝预处理;通过深度加权子树相似度算法抽取最佳频繁子树;通过树的一致性对齐方法求出最小评论区域,然后通过路径文本长度抽取最频繁评论路径并提取评论内容。本申请降低了时间复杂度,提高了抽取效率和抽取的准确率,且人工干预少,抽取过程全自动,适应范围广,不用构造抽取模板,无需考虑网页结构变更带来模板更新的麻烦。
📄 2016100533471
📂 G06F17_27
👤 广东工业大学
📅 2016-01-26
本发明涉及自然语言序列标注技术领域,公开了一种基于深度神经网络的信息抽取方法,BERT‑BiLSTM‑CRF模型能够解决信息抽取任务中存在的一词多义与同物异名问题,以及信息抽取任务中存在的待抽取信息长短不统一和待抽取信息有错别字、描述简短等问题,通过批量过采样的方式增加批量中少数类样本信息的数量,使得模型在训练的过程中可以有效学习到少数类样本信息的特征,从而在一定程度上解决数据类别分布不均衡的问题,使得少数类样本信息的抽取效果有显著提升。
📄 2022107191396
📂 G06F40_216
👤 成都信息工程大学
📅 2022-06-23