合肥金星智控科技股份有限公司
宣传

位置：中冶有色 >

有色技术频道 >

有色金属技术

矿山技术

冶金技术

材料制备及加工技术

环境保护技术

分析检测技术

> 分析检测技术

> 失效分析技术

> MapReduce任务的容错调度方法

MapReduce任务的容错调度方法

638   编辑：管理员   来源：中冶有色技术网  
2023-03-19 09:01:43
本发明涉及云计算环境中并行任务的调度处理方法，公开一种针对MapReduce作业的容错调度方法，以提高MapReduce作业的整体性能，减少节点失效时的作业延迟。本发明结合检查点和主动复制两种技术，在Mapper任务执行时创建本地检查点和索引检查点两种检查点，当任务发生失效时，本地检查点能够将出错任务的状态和执行恢复到检查点处，减少了任务的重复执行时间；当发生节点失效时，副本节点能够根据索引检查点快速构造出失效节点上执行的mapper任务的中间结果数据，大大减少了重调度任务的执行时间。实验结果表明该方法能够比Hadoop的运行时性能提高30%以上，同时并不明显增加系统的存储和网络开销。
声明：
“MapReduce任务的容错调度方法” 该技术专利(论文)所有权利归属于技术(论文)所有人。仅供学习研究，如用于商业用途，请联系该技术所有人。
我是此专利(论文)的发明人(作者)
分享 0
         
举报 0
收藏 0
反对 0
点赞 0
标签：
失效分析
上一个：修复存储芯片的方法和装置
下一个：提高网络路由可靠性的方法和装置

与 “MapReduce任务的容错调度方法” 相关技术

▪ 燃料改性与烟气返回低NOX烧结技术
▪ 利用烧结除尘灰/高炉瓦斯灰生产氯化钾
▪ 微硅粉制备纳米白炭黑
▪ 利用钢渣制备多孔吸声材料及透水砖
▪ 球形纳米WC-Co复合粉及其硬质合金
▪ 高性能钨铜合金
▪ 金属连续流变挤压技术
▪ 极速金属3D打印技术
▪ 重金属污染治理及生态修复
▪ 机械曲柄摇杆机构扭簧疲劳试验机

相关失效分析设备推荐

土壤呼吸测定仪
直推式土壤取样钻机
土壤紧实度测量仪
环氧乙烷检测仪
SY-T02土壤紧实度测定仪
全国热门有色金属技术推荐
江苏矿山技术 徐州矿山技术 江苏选矿技术 江苏通用技术 徐州通用技术 北京矿山技术 北京采矿技术 北京通用技术 福建矿山技术 福建通用技术 江苏冶金技术 江苏火法冶金技术 北京冶金技术 北京火法冶金技术 北京湿法冶金技术 福建冶金技术 江苏材料制备及加工技术 常州材料制备及加工技术 江苏新能源材料技术 江苏加工技术 北京材料制备及加工技术 福建材料制备及加工技术 江苏环境保护技术 南京环境保护技术 苏州环境保护技术 南通环境保护技术 江苏废水处理技术 江苏固/危废处置技术 北京环境保护技术 北京废水处理技术 第十七届东亚资源再生技术国际会议
展开更多 +

 

中冶有色技术平台微信公众号
了解更多信息请您扫码关注官方微信
中冶有色技术平台微信公众号中冶有色技术平台

最新更新技术

▪燃料改性与烟气返回低NOX烧结技术
▪利用烧结除尘灰/高炉瓦斯灰生产氯化钾
▪微硅粉制备纳米白炭黑
▪利用钢渣制备多孔吸声材料及透水砖
▪球形纳米WC-Co复合粉及其硬质合金
▪高性能钨铜合金
▪金属连续流变挤压技术
▪极速金属3D打印技术
▪重金属污染治理及生态修复
▪机械曲柄摇杆机构扭簧疲劳试验机

报名参会
更多+

2024先进钢铁钒钛产业链融通与绿色低碳发展论坛
2024先进钢铁钒钛产业链融通与绿色低碳发展论坛
2024年07月05日 ~ 07日
2024关键金属选冶及高纯制程技术交流会
2024关键金属选冶及高纯制程技术交流会
2024年07月12日 ~ 14日
全国有色金属工业电化学第三届学术会议
全国有色金属工业电化学第三届学术会议
2024年07月12日 ~ 14日
2024再生铝产业技术进步与减污降碳创新研讨会
2024再生铝产业技术进步与减污降碳创新研讨会
2024年07月12日 ~ 14日
先进金属材料研究与智能制造技术应用研讨会
先进金属材料研究与智能制造技术应用研讨会
2024年07月19日 ~ 21日

报告下载

1 实验室管理与实践
下载:52
2 化学实验室暖通系统设计新趋势
下载:50
3 矿产品样品制备要点与难点分析
下载:44
4 质检部门风险防控管理的探讨 （矿
下载:41
5 ICP-MS/MS测定有色金属中
下载:37
6 电位滴定法在北矿检测实验室的应
下载:33
7 电位滴定仪在有色金属分析的应用
下载:32
8 国家标准《铜精矿及主要含铜物料
下载:32
9 全面禁止洋垃圾入境形势下的固废
下载:32
10 金精矿制样与分析方法的研究
下载:32
第二届关键基础材料模拟、制备与评价技术交流会
推广

热门技术
更多+

1压力平衡机构
2水电站的尾水预埋件
3防爆阀保护膜
4化工矿产有色金属的检测机构
5矿石分类与实时定量分析的光谱检测新方法
6矿石中有色金属成分和含量的检测装置
7有色金属现货状态评估系统及方法
8有色金属废料中铁磁性杂质检测设备及检测工艺
9高温熔体缓冷装置及渣包测温方法
10便携式矿山测量激光仪
衡水宏运压滤机有限公司
宣传
环磨科技控股（集团）有限公司
宣传

发布

在线客服

公众号

电话

顶部
咨询电话：
010-88793500-807
专利人/作者信息登记