发明专利已授权

一种资源不均衡Spark环境下的任务调度优化方法

📄 申请号：CN201910669809.6 📄 发布日：2026/08/04

著录项目信息

申请日

2019-07-24

申请人

浙江工业大学

法律状态

已下证

专利类型

发明

主分类号

G06F9_48

IPC 分类号

G06F9_48 , G06F9_50 ,

技术画像

所属领域

调度优化任务调度资源调度分布式计算调度优化

应用场景

大数据分析, 云计算平台, 数据中心, 分布式集群计算, 任务调度系统

AI 智能推荐 · 同申请人专利 · 搜索相似专利

摘要

本发明涉及一种资源不均衡Spark环境下的任务调度优化方法，本发明对Spark的底层调度算法进行优化，提出了基于节点优先级的Spark动态自适应调度算法(Spark Dynamic Adaptive Scheduling Algorithm，SDASA)。SDASA使用节点的优先级表示其计算能力，并在任务运行过程中实时进行优先级的更新，充分了考虑节点的异构性、资源利用和负载等情况。实验证明SDASA能够提高Spark系统的运行效率，缩短作业执行时间。当执行不同数据量的同种任务时，使用SDASA算法集群性能平均提升6.99％；当执行不同种任务时，使用SDASA算法集群性能平均提升6.32％。

权利要求书 (12项) 说明书附图

……

图1

图2

图3

法律状态时间线

一种表面碳修饰的层状三元富锂材料及其应用

当前第 / 件

一种全细胞催化制备脱羧肌肽的方法

同领域国内专利 · IPC: (G06F9_48)

G06F9_22 G06F9_26 G06F9_30 G06F9_302 G06F9_32 G06F9_345 G06F9_38 G06F9_44 G06F9_4401 G06F9_445 G06F9_448 G06F9_45 G06F9_451 G06F9_455 G06F9_46 G06F9_48 G06F9_50 G06F9_52 G06F9_54 覆盖19个领域

议价

不含过户费

📋 交易方式： 委托待转让 📌 交易状态：在售 👁️ 浏览次数：9 ❤️ 收藏人数：93 📋 项目申报： 未申报

资金托管权属尽调包过户

🏢 淄博智来知识产权服务有限公司

✓ 企业认证✓ 手机绑定历史成交 0件好评率 98.5%

📊 出价记录 (3条)

王**¥-10万

李** 企业¥-8万

陈**¥-3万

查看全部出价

我要出价 (议价)

一种资源不均衡Spark环境下的任务调度优化方法

著录项目信息

技术画像

所属领域

应用场景

摘要

法律状态时间线

同领域国内专利 · IPC: (G06F9_48)

相似专利推荐 AI 驱动 · 同领域

基于Ceph的十亿级节点规模知识图谱的对象存储管理方法及系统

一种虚拟仿真地形直观绘制及接缝自然过渡的方法

一种大数据处理平台下的任务调度方法

服务项目

资源中心

关于柿子坊