咨询电话：13280638997
传真：0533-3110363
邮箱：kefu@shizifang.com
24小时咨询热线13280638997
24小时咨询热线著 录 项 目：
| 专利/申请号： | CN201710236260.2 | 专利名称： | 一种大数据网络爬虫分页选择方法和系统 |
| 申请日： | 2017-04-12 | 申请/专利权人 | 成都四方伟业软件股份有限公司 |
| 专利类型： | 发明 | 地址： | 四川省成都市高新区科园三路4号1栋2层 |
| 专利状态： | 已下证 查询审查信息 | IPC分类号： | G06F17/30 分类检索 |
| 公开/公告日： | 2017-08-18 | 转让价格： | 【平台担保交易】 |
| 公开/公告号： | CN107066576A | 交易状态： | 等待洽谈 搜索相似专利 |
| 浏览量： | 49 | 所属领域： | 数据服务专利转让搜索 |
摘 要：本发明公开了一种大数据网络爬虫分页选择方法和系统。方法包括以下步骤：解析爬虫脚本；获取匹配符，对爬虫脚本内容中的标签信息进行匹配；将匹配成功的标签的特征值存入URL队列中；获取URL队列中的URL连接地址，校验URL连接地址；获取校验后的URL连接地址，进行地址匹配；解析地址匹配成功的URL地址的网页，获取分页信息；系统包括第一解析模块，第一匹配模块，存储模块，获取模块，第二匹配模块，第二解析模块和配置模块。本发明解决了当网页中的页面按钮HTML结构发生改变时，不能循环爬取网页数据的问题，能够精准识别数据的分页标签，有效防止循环爬取数据过程中断，提升了网页数据的爬取效率。
| 交易方 | 企业 | 个人 |
| 买家 | 营业执照副本复印件（需盖公章） | 身份证复印件（签字） |
| 专利转让委托书（需盖公章）一式两份 | 专利转让委托书（需签字）一式两份 | |
| 专利转让协议（需盖公章）一式两份 | 专利转让协议（需签字）一式两份 | |
| 卖家 | 营业执照副本复印件（需盖公章） | 身份证复印件（需申请人签字） |
| 解除代理委托书（需盖公章）一式两份（如专利通过代理机构申请） | 解除代理委托书（需签字）一式两份（如专利通过代理机构申请） | |
| 专利转让协议（需盖公章）一式两份 | 专利转让协议（需签字）一式两份 | |
| 专利请求书或手续合格通知书、授权通知书复印件 | 专利请求书或手续合格通知书、专利授权通知书复印件 | |
| 专利证原件（若授权下证） | 专利证原件（若授权下证） |
| 日期 | 法律信息 | 备注 |
| 申请号 | 专利名称 | 发布日期 |
| 2018103496609 | 【发明】面向地铁设计规范中知识图谱节点自动构建方法 | 2025/10/29 |
| 2018103490797 | 【发明】基于思维导图的楼梯设计规范缺省主语的补全方法 | 2025/10/29 |
| 2019104677150 | 【发明】基于多目标优化的TN-C系统接地数量计算方法 | 2025/10/27 |
| 2016104406367 | 【发明】物体识别方法和装置、数据处理装置和终端设备 | 2025/10/22 |
| 2016105159954 | 【发明】样本数据处理、数据识别方法和装置、计算机设备 | 2025/10/22 |
| 2018103747236 | 【发明】一种关注信息的处理方法及装置、存储介质、电子设备 | 2025/10/22 |
| 2018103747255 | 【发明】内容数据处理方法、装置、电子设备及存储介质 | 2025/10/22 |
| 2018106078239 | 【发明】数据处理方法和装置、电子设备和计算机可读存储介质 | 2025/10/22 |
| 2020100748484 | 【发明】数据处理方法、装置及芯片、电子设备、存储介质 | 2025/10/22 |
| 2014107155060 | 【发明】一种阅读前后辅助用户进行生字巩固的方法和终端 | 2025/10/21 |
