发明专利 已授权

一种消除大数据规范关系连接冗余的优化方法

📄 申请号:CN201710638243.1 📄 发布日:2025/11/14

著录项目信息

申请日
2017-07-31
公开号
CN107506394B
公开日
2020-05-29
申请人
武汉雷特科技有限公司
法律状态
已下证
专利类型
发明
主分类号
IPC 分类号

技术画像

应用场景

大数据分析, 数据仓库, 商业智能, 数据集成, 云计算服务

摘要

本发明通过对二次排序算法进行优化,重新定义Map阶段的分区过程、Shuffle阶段的排序及分组过程,使得Map阶段的输出为包含一方关系属性值和多方关系排序值的组合键及包含多方关系属性值的集合,Reduce阶段将组合键进行分解,提取一方关系的主码作为HBase表的行键,并将组合键中一方关系的各个属性值,多方关系属性值集合及排序后的连接结果分别写入HBase表中对应的列,从而既实现了连接的语义,又消除了冗余,由于以HBase表存储连接结果,从而可以利用HBase提供的各类方法进行数据检索,提高了对连接结果的查询效率。
权利要求书 (12项) 说明书 附图

……

……

图1
图2
图3

法律状态时间线

议价
不含过户费

📋 交易方式: 委托待转让 📌 交易状态: 在售 👁️ 浏览次数:121 ❤️ 收藏人数:93 📋 项目申报: 未申报

资金托管 权属尽调 包过户
🏢 淄博智来知识产权服务有限公司
✓ 企业认证✓ 手机绑定历史成交 3件好评率 98.5%

📊 出价记录 (3条)
王**¥-10万
李** 企业¥-8万
陈**¥-3万
查看全部出价