咨询电话:13280638997
传真:0533-3110363
邮箱:kefu@shizifang.com
著 录 项 目:
专利/申请号: | CN201710160862.4 | 专利名称: | 一种基于Spark算子的序列化存储优化方法 |
申请日: | 2017-03-17 | 申请/专利权人 | 重庆邮电大学 |
专利类型: | 发明 | 地址: | 重庆市南岸区黄桷垭崇文路2号 |
专利状态: | 已下证 查询审查信息 | 分类号: | G06F12/02分类检索 其他专利转让搜索 |
公开/公告日: | 转让价格: | 【平台担保交易】 | |
公开/公告号: | 交易状态: | 等待洽谈 搜索相似专利 |
摘 要:本发明公开了一种基于Spark算子的序列化存储优化方法,包括以下步骤:S1)使用ganglia检测应用执行过程中机器的内存使用量,如果检测到当前内存值正常,则继续监测,若检测到已达到指定阈值,则执行步骤S2);S2)计算RDD的执行时间和RDD的执行效率;S3)根据公式(5)得到已排序的RDD序列,即序列化候选集合;S4)从序列化候选集合中选择值最小的进行序列化存储;S5)继续步骤1),直到应用执行完毕。本发明实现在应用执行过程中高效存储有价值的RDD缓存,从而提高内存的使用率。相比与现有的缓存使用方案,本方法应用于现有的Spark大数据平台上,能够在内存资源有限时使整个应用保持较高的执行效率。
交易方 | 企业 | 个人 |
买家 | 营业执照副本复印件(需盖公章) | 身份证复印件(签字) |
专利转让委托书(需盖公章)一式两份 | 专利转让委托书(需签字)一式两份 | |
专利转让协议(需盖公章)一式两份 | 专利转让协议(需签字)一式两份 | |
卖家 | 营业执照副本复印件(需盖公章) | 身份证复印件(需申请人签字) |
解除代理委托书(需盖公章)一式两份(如专利通过代理机构申请) | 解除代理委托书(需签字)一式两份(如专利通过代理机构申请) | |
专利转让协议(需盖公章)一式两份 | 专利转让协议(需签字)一式两份 | |
专利请求书或手续合格通知书、授权通知书复印件 | 专利请求书或手续合格通知书、专利授权通知书复印件 | |
专利证原件(若授权下证) | 专利证原件(若授权下证) |
日期 | 法律信息 | 备注 |
2020/02/07 | 授权 | |
2017/07/14 | 实质审查的生效 | IPC(主分类): G06F 12/02 专利申请号: 201710160862.4 申请日: 2017.03.17 |
2017/06/20 | 公开 |
申请号 | 专利名称 | 发布日期 |
2014105085646 | 【发明】一种双系统终端的数据读写方法及双系统终端 | 2025/06/24 |
2014105250304 | 【发明】移动终端及数据分区的处理方法 | 2025/05/09 |
2014103709240 | 【发明】数据存储方法和数据存储装置 | 2025/05/09 |
2014105797015 | 【发明】数据删除方法、数据删除装置和终端 | 2025/05/09 |
2015108872313 | 【发明】移动透明计算系统服务器端多用户访问的镜像缓存方法 | 2025/05/07 |
202210081350X | 【发明】一种多任务优化的智能缓存方法 | 2025/04/10 |
2015100800849 | 【发明】内存管理方法、内存管理装置和终端 | 2025/01/13 |
2015100452107 | 【发明】双系统共用内存的分配方法及装置 | 2025/01/13 |
2015100358105 | 【发明】存储空间分配方法、存储空间分配装置和终端 | 2025/01/13 |
2016105031946 | 【发明】一种移动共享存储方法及装置 | 2025/03/31 |