咨询电话:13280638997
传真:0533-3110363
邮箱:kefu@shizifang.com
摘 要:本发明公开了一种数据计算去重方法、系统、服务器及存储介质,适用于大数据中的数据去重。本发明提供的方法包括:接收调用请求,利用dubbo组件进行负载均衡;解析所述请求,根据所述请求中预设的去重级别参数,在所述服务器上创建对应数量的redis数据存储bitmap;获取所述请求中的去重内容参数和所述去重级别参数,通过Bloom Filter算法计算得到去重结果,当所述去重级别大于1级且去重结果返回值为0时,重新计算一组hash函数,再次通过Bloom Filter算法去重。本发明中通过dubbo组件进行负载均衡,同时根据预设的去重等级,通过Bloom Filter算法进行对应级别的计数去重,不仅可以保障数据得到高效快速的处理,而且能大大减少数据误杀概率,提升去重的准确性。
著 录 项:
专利/申请号: | CN201810498172.4 | 专利名称: | 一种数据计数去重方法、系统、服务器及存储介质 |
申请日: | 2018-05-23 | 申请/专利权人 | 武汉斗鱼网络科技有限公司 |
专利类型: | 发明 | 地址: | 湖北省武汉市东湖开发区软件园东路1号软件产业4.1期B1栋11楼 |
专利状态: | 已下证 查询审查信息 | 分类号: | G06F9/54搜分类 计算机硬件 服务搜索 |
公开/公告日: | 2022-03-22 | 转让价格: | 面议 |
公开/公告号: | CN108804242B | 交易状态: | 等待洽谈 搜索相似专利 |
交易方 | 企业 | 个人 |
买家 | 营业执照副本复印件(需盖公章) | 身份证复印件(签字) |
专利转让委托书(需盖公章)一式两份 | 专利转让委托书(需签字)一式两份 | |
专利转让协议(需盖公章)一式两份 | 专利转让协议(需签字)一式两份 | |
卖家 | 营业执照副本复印件(需盖公章) | 身份证复印件(需申请人签字) |
解除代理委托书(需盖公章)一式两份(如专利通过代理机构申请) | 解除代理委托书(需签字)一式两份(如专利通过代理机构申请) | |
专利转让协议(需盖公章)一式两份 | 专利转让协议(需签字)一式两份 | |
专利请求书或手续合格通知书、授权通知书复印件 | 专利请求书或手续合格通知书、专利授权通知书复印件 | |
专利证原件(若授权下证) | 专利证原件(若授权下证) |
日期 | 法律信息 | 备注 |