发明专利已授权

Web网站产品详细信息的分类抓取及产品信息库建立方法

📄 申请号：CN201410190477.0 📄 发布日：2026/04/16

著录项目信息

申请日

2014-05-07

申请人

重庆邮电大学

法律状态

已下证

专利类型

发明

主分类号

G06F17_30

IPC 分类号

G06F17_30

技术画像

所属领域

网络数据抓取网络数据抓取信息处理数据库技术

应用场景

电子商务, 数据采集, 信息检索, 大数据分析, 商业情报

AI 智能推荐 · 同申请人专利 · 搜索相似专利

摘要

本发明针对Web网站产品信息的获取设计了一种网页抓取方法，首先抓取网站产品一级分类的首页，通过分析抓取的分类首页源文件，获取下一级产品分类首页链接；然后逐级抓取，直到网站所有分类首页抓取完毕；通过分析所有分类子页面的源文件，获取翻页元素和各分类页面数，然后生成各分类的子页面链接，最后根据各分类的子页面链接，完成各分类子页面的抓取。同时通过分析爬虫抓取的产品分类子页面源文件，提取产品详细信息和产品所属分类信息，建立网站产品id、分类id以及其他详细信息的映射关系，构建产品信息库。

权利要求书 (12项) 说明书附图

……

图1

图2

图3

法律状态时间线

抗菌五肽衍生物及其应用

当前第 / 件

一种基于MapReduce算法的并行识别、统计网页URL的方法

同领域国内专利 · IPC: (G06F17_30)

G06F17_00 G06F17_10 G06F17_11 G06F17_12 G06F17_13 G06F17_14 G06F17_15 G06F17_16 G06F17_17 G06F17_18 G06F17_21 G06F17_22 G06F17_24 G06F17_25 G06F17_27 G06F17_28 G06F17_30 G06F17_40 G06F17_50 覆盖19个领域

议价

不含过户费

📋 交易方式： 委托待转让 📌 交易状态：在售 👁️ 浏览次数：41 ❤️ 收藏人数：93 📋 项目申报： 未申报

资金托管权属尽调包过户

🏢 淄博智来知识产权服务有限公司

✓ 企业认证✓ 手机绑定历史成交 0件好评率 98.5%

📊 出价记录 (3条)

王**¥-10万

李** 企业¥-8万

陈**¥-3万

查看全部出价

我要出价 (议价)

Web网站产品详细信息的分类抓取及产品信息库建立方法

著录项目信息

技术画像

所属领域

应用场景

摘要

法律状态时间线

同领域国内专利 · IPC: (G06F17_30)

相似专利推荐 AI 驱动 · 同领域

一种适用于多域异构数据的上下文感知智能检索方法

一种基于大数据的智慧园区信息安全管理系统

一种工业计算机用主板结构【计算机主板微机电路板数据采集大数据网络安全工控机物联网】

服务项目

资源中心

关于柿子坊

Web网站产品详细信息的分类抓取及产品信息库建立方法

著录项目信息

技术画像

所属领域

应用场景

摘要

法律状态时间线

同领域国内专利 · IPC: (G06F17_30)

相似专利推荐 AI 驱动 · 同领域

一种适用于多域异构数据的上下文感知智能检索方法

一种基于大数据的智慧园区信息安全管理系统

一种工业计算机用主板结构 【计算机 主板 微机 电路板 数据采集 大数据 网络安全 工控机 物联网 】

服务项目

资源中心

关于柿子坊

一种工业计算机用主板结构【计算机主板微机电路板数据采集大数据网络安全工控机物联网】