咨询电话:13280638997
传真:0533-3110363
邮箱:kefu@shizifang.com
摘 要:本发明涉及一种基于维特比算法的网页分类排序动态爬虫方法,属于网络数据挖掘技术领域。本发明首先给出种子URL,并将种子URL作为父链接向下爬取,获取出链子链接;基于链接结构计算子链接的入链数;随后获取子链接网页内容并计算网页内容与主题的相似性;通过计算网页的综合评价值,淘汰评价值较低的网页并将剩下的网页作为父链接向下爬取新的链接。重复上述过程,直到爬虫过程中没有新的网页加入,则停止爬虫。本发明方法可以使用户在给定主题的条件下,通过基于维特比算法的动态网络爬虫,可以高效、准确获取特定主题下的重要网站。
著 录 项:
专利/申请号: | CN201711056113.3 | 专利名称: | 一种基于维特比算法的网页分类排序动态爬虫方法 |
申请日: | 2017-11-01 | 申请/专利权人 | 昆明理工大学 |
专利类型: | 发明 | 地址: | 云南省昆明市五华区学府路253号 |
专利状态: | 已下证 查询审查信息 | 分类号: | G06F16/951搜分类 互联网 计算机软件搜索 |
公开/公告日: | 2022-02-08 | 转让价格: | 面议 |
公开/公告号: | CN108009202B | 交易状态: | 等待洽谈 搜索相似专利 |
交易方 | 企业 | 个人 |
买家 | 营业执照副本复印件(需盖公章) | 身份证复印件(签字) |
专利转让委托书(需盖公章)一式两份 | 专利转让委托书(需签字)一式两份 | |
专利转让协议(需盖公章)一式两份 | 专利转让协议(需签字)一式两份 | |
卖家 | 营业执照副本复印件(需盖公章) | 身份证复印件(需申请人签字) |
解除代理委托书(需盖公章)一式两份(如专利通过代理机构申请) | 解除代理委托书(需签字)一式两份(如专利通过代理机构申请) | |
专利转让协议(需盖公章)一式两份 | 专利转让协议(需签字)一式两份 | |
专利请求书或手续合格通知书、授权通知书复印件 | 专利请求书或手续合格通知书、专利授权通知书复印件 | |
专利证原件(若授权下证) | 专利证原件(若授权下证) |
日期 | 法律信息 | 备注 |