咨询电话:13280638997
传真:0533-3110363
邮箱:kefu@shizifang.com
摘 要:本发明提供的基于改良云平台的网页蜘蛛主题式搜索系统,针对基于链接结构的网页分析算法HITS算法及基于VSM向量空间模型的主题相似度计算的网页分析算法进行改进,提出了改进的网页蜘蛛模型算法,提出了基于Hadoop云平台网页蜘蛛的总体框架模型,在文件系统HDFS上设计实现了云平台网页蜘蛛的存储结构,并基于模块划分对各个功能模块进行MapReduce算法实现;提出了改进的任务分配算法,能够兼顾均匀分配及各个爬取子结点负载情况,提高了云平台网页蜘蛛系统的爬取效率和准确性;结果表明本发明提出并实现的基于Hadoop的云平台网页蜘蛛系统是可行且有效的,能够大幅提高主题式搜索的准确性及效率,能够全面、快速、准确的检索主题关联信息。
著 录 项:
专利/申请号: | CN202011531209.2 | 专利名称: | 基于改良云平台的网页蜘蛛主题式搜索系统 |
申请日: | 2020-12-22 | 申请/专利权人 | 荆门汇易佳信息科技有限公司 |
专利类型: | 发明 | 地址: | 湖北省荆门市高新区龙井大道238号(九派通创业园) |
专利状态: | 授权未缴费 查询审查信息 | 分类号: | G06F16/951搜分类 计算机硬件搜索 |
公开/公告日: | 2021-04-02 | 转让价格: | 面议 |
公开/公告号: | CN112597369A | 交易状态: | 等待洽谈 搜索相似专利 |
交易方 | 企业 | 个人 |
买家 | 营业执照副本复印件(需盖公章) | 身份证复印件(签字) |
专利转让委托书(需盖公章)一式两份 | 专利转让委托书(需签字)一式两份 | |
专利转让协议(需盖公章)一式两份 | 专利转让协议(需签字)一式两份 | |
卖家 | 营业执照副本复印件(需盖公章) | 身份证复印件(需申请人签字) |
解除代理委托书(需盖公章)一式两份(如专利通过代理机构申请) | 解除代理委托书(需签字)一式两份(如专利通过代理机构申请) | |
专利转让协议(需盖公章)一式两份 | 专利转让协议(需签字)一式两份 | |
专利请求书或手续合格通知书、授权通知书复印件 | 专利请求书或手续合格通知书、专利授权通知书复印件 | |
专利证原件(若授权下证) | 专利证原件(若授权下证) |
日期 | 法律信息 | 备注 |