合肥金星智控科技股份有限公司
宣传

位置：中冶有色 >

有色技术频道 >

有色金属技术

矿山技术

冶金技术

材料制备及加工技术

环境保护技术

分析检测技术

> 分析检测技术

> 化学分析技术

> 基于强化学习的异构MapReduce集群推测执行调度方法

基于强化学习的异构MapReduce集群推测执行调度方法

1040   编辑：管理员   来源：中冶有色技术网  
2023-03-19 06:49:12
本发明涉及一种基于强化学习的异构MapReduce集群推测执行调度方法，属于大数据处理领域。本发明采用基于Q‑learning强化学习的节点权重动态更新方法，基于历史信息实现节点权重的自适应调整，有效提升了task剩余运行时间的估算准确性；对straggler进行是否迁移的判别，需同时满足备份task比例约束，以及迁移后的运行时间约束两项条件，straggler才能启动备份任务；同时结合map task快节点和reduce task快节点，这种方式提升了异构MapReduce集群的资源利用率。基于典型数据集的仿真试验结果表明，相比于现有算法，本文提出的算法对于大规模数据的处理效率明显提升。
声明：
“基于强化学习的异构MapReduce集群推测执行调度方法” 该技术专利(论文)所有权利归属于技术(论文)所有人。仅供学习研究，如用于商业用途，请联系该技术所有人。
我是此专利(论文)的发明人(作者)
分享 0
         
举报 0
收藏 0
反对 0
点赞 0
标签：
化学分析
上一个：污染物化学需氧量自动测定装置
下一个：电化学式感测装置

与 “基于强化学习的异构MapReduce集群推测执行调度方法” 相关技术

▪ 斗轮上料磁选车
▪ 新型重金属螯合絮凝剂的制备技术
▪ 活塞式内燃机中活塞环用合金材料
▪ 降低铝电解阳极效应的控制方法
▪ 稀土绿色萃取分离技术
▪ 年产250吨电子级低氧超高纯钛
▪ 低成本太阳能多晶硅制备技术
▪ 用于负极材料的纳米硅粉制备及产业化应用技术研发
▪ 具有除铁功能的粉碎机
▪ 具有防尘效果的振动筛下料装置

相关化学分析设备推荐

高温摩擦磨损试验机
固定式气体检测仪
X光灰分仪+智能密控系统
多气体检测仪
WEW系列微机显示万能材料试验机
全国热门有色金属技术推荐
江苏矿山技术 徐州矿山技术 江苏选矿技术 江苏通用技术 徐州通用技术 北京矿山技术 北京采矿技术 北京通用技术 福建矿山技术 福建通用技术 江苏冶金技术 江苏火法冶金技术 北京冶金技术 北京火法冶金技术 北京湿法冶金技术 福建冶金技术 江苏材料制备及加工技术 常州材料制备及加工技术 江苏新能源材料技术 江苏加工技术 北京材料制备及加工技术 福建材料制备及加工技术 江苏环境保护技术 南京环境保护技术 苏州环境保护技术 南通环境保护技术 江苏废水处理技术 江苏固/危废处置技术 北京环境保护技术 北京废水处理技术 第十七届东亚资源再生技术国际会议
展开更多 +

 

中冶有色技术平台微信公众号
了解更多信息请您扫码关注官方微信
中冶有色技术平台微信公众号中冶有色技术平台

最新更新技术

▪斗轮上料磁选车
▪新型重金属螯合絮凝剂的制备技术
▪活塞式内燃机中活塞环用合金材料
▪降低铝电解阳极效应的控制方法
▪稀土绿色萃取分离技术
▪年产250吨电子级低氧超高纯钛
▪低成本太阳能多晶硅制备技术
▪用于负极材料的纳米硅粉制备及产业化应用技术研发
▪具有除铁功能的粉碎机
▪具有防尘效果的振动筛下料装置

报名参会
更多+

2024胶凝材料制备与应用技术交流会
2024胶凝材料制备与应用技术交流会
2024年08月07日 ~ 09日
2024先进陶瓷材料制备加工与应用交流会
2024先进陶瓷材料制备加工与应用交流会
2024年08月08日 ~ 10日
富矿精开科技创新研讨会
富矿精开科技创新研讨会
2024年08月14日 ~ 16日
2024钠电产业技术创新与应用高峰论坛
2024钠电产业技术创新与应用高峰论坛
2024年08月16日 ~ 18日
第三届全国难熔金属及硬质合金技术研讨会
第三届全国难熔金属及硬质合金技术研讨会
2024年08月30日 ~ 09月01日

报告下载

1 实验室管理与实践
下载:52
2 化学实验室暖通系统设计新趋势
下载:50
3 矿产品样品制备要点与难点分析
下载:44
4 质检部门风险防控管理的探讨 （矿
下载:41
5 ICP-MS/MS测定有色金属中
下载:37
6 电位滴定法在北矿检测实验室的应
下载:33
7 电位滴定仪在有色金属分析的应用
下载:32
8 国家标准《铜精矿及主要含铜物料
下载:32
9 全面禁止洋垃圾入境形势下的固废
下载:32
10 金精矿制样与分析方法的研究
下载:32
第二届关键基础材料模拟、制备与评价技术交流会
推广

热门技术
更多+

1压力平衡机构
2水电站的尾水预埋件
3防爆阀保护膜
4化工矿产有色金属的检测机构
5矿石分类与实时定量分析的光谱检测新方法
6矿石中有色金属成分和含量的检测装置
7有色金属现货状态评估系统及方法
8有色金属废料中铁磁性杂质检测设备及检测工艺
9高温熔体缓冷装置及渣包测温方法
10便携式矿山测量激光仪
衡水宏运压滤机有限公司
宣传
环磨科技控股（集团）有限公司
宣传

发布

在线客服

公众号

电话

顶部
咨询电话：
010-88793500-807
专利人/作者信息登记