合肥金星智控科技股份有限公司
宣传

位置：中冶有色 >

有色技术频道 >

有色金属技术

矿山技术

冶金技术

材料制备及加工技术

环境保护技术

分析检测技术

> 分析检测技术

> 失效分析技术

> MapReduce任务的容错调度方法

MapReduce任务的容错调度方法

634   编辑：管理员   来源：中冶有色技术网  
2023-03-19 09:01:43
本发明涉及云计算环境中并行任务的调度处理方法，公开一种针对MapReduce作业的容错调度方法，以提高MapReduce作业的整体性能，减少节点失效时的作业延迟。本发明结合检查点和主动复制两种技术，在Mapper任务执行时创建本地检查点和索引检查点两种检查点，当任务发生失效时，本地检查点能够将出错任务的状态和执行恢复到检查点处，减少了任务的重复执行时间；当发生节点失效时，副本节点能够根据索引检查点快速构造出失效节点上执行的mapper任务的中间结果数据，大大减少了重调度任务的执行时间。实验结果表明该方法能够比Hadoop的运行时性能提高30%以上，同时并不明显增加系统的存储和网络开销。
声明：
“MapReduce任务的容错调度方法” 该技术专利(论文)所有权利归属于技术(论文)所有人。仅供学习研究，如用于商业用途，请联系该技术所有人。
我是此专利(论文)的发明人(作者)
分享 0
         
举报 0
收藏 0
反对 0
点赞 0
标签：
失效分析
上一个：修复存储芯片的方法和装置
下一个：提高网络路由可靠性的方法和装置

与 “MapReduce任务的容错调度方法” 相关技术

▪ 生物毒性废水的微生物治理关键技术
▪ 铝酸钠溶液水热晶种分解制备γ-Al2O3载体技术
▪ 铝泥废渣的减排与高效综合利用
▪ FCC废催化剂的减排与高效节能利用
▪ 低品位煤系高岭土的高效节能综合利用
▪ 滤清器脉冲疲劳试验机
▪ 土壤污染修复振动筛装置
▪ 可变槽型的煤用螺旋分选机
▪ 防尘型对辊粉碎机
▪ 节能环保型粮食筛分用振动筛

相关失效分析设备推荐

土壤测定仪
定时定位土壤水分速测仪
多气体检测仪
金属探伤仪
智能土壤墒情监测设备
全国热门有色金属技术推荐
江苏矿山技术 徐州矿山技术 江苏选矿技术 江苏通用技术 徐州通用技术 北京矿山技术 北京采矿技术 北京通用技术 福建矿山技术 福建通用技术 江苏冶金技术 江苏火法冶金技术 北京冶金技术 北京火法冶金技术 北京湿法冶金技术 福建冶金技术 江苏材料制备及加工技术 常州材料制备及加工技术 江苏新能源材料技术 江苏加工技术 北京材料制备及加工技术 福建材料制备及加工技术 江苏环境保护技术 南京环境保护技术 苏州环境保护技术 南通环境保护技术 江苏废水处理技术 江苏固/危废处置技术 北京环境保护技术 北京废水处理技术 第十七届东亚资源再生技术国际会议
展开更多 +

 

中冶有色技术平台微信公众号
了解更多信息请您扫码关注官方微信
中冶有色技术平台微信公众号中冶有色技术平台

最新更新技术

▪生物毒性废水的微生物治理关键技术
▪铝酸钠溶液水热晶种分解制备γ-Al2O3载体技术
▪铝泥废渣的减排与高效综合利用
▪FCC废催化剂的减排与高效节能利用
▪低品位煤系高岭土的高效节能综合利用
▪滤清器脉冲疲劳试验机
▪土壤污染修复振动筛装置
▪可变槽型的煤用螺旋分选机
▪防尘型对辊粉碎机
▪节能环保型粮食筛分用振动筛

报名参会
更多+

2024先进金属材料成形与加工技术交流会
2024先进金属材料成形与加工技术交流会
2024年06月28日 ~ 30日
第二届材料热处理与表面工程技术应用交流会
第二届材料热处理与表面工程技术应用交流会
2024年06月28日 ~ 30日
2024固态电池前沿技术发展论坛
2024固态电池前沿技术发展论坛
2024年07月12日 ~ 14日
第六届中国有色金属资源循环与绿色发展大会
第六届中国有色金属资源循环与绿色发展大会
2024年07月17日 ~ 19日
第二届关键基础材料模拟、制备与评价技术交流会
第二届关键基础材料模拟、制备与评价技术交流会
2024年07月26日 ~ 28日

报告下载

1 实验室管理与实践
下载:52
2 化学实验室暖通系统设计新趋势
下载:50
3 矿产品样品制备要点与难点分析
下载:44
4 质检部门风险防控管理的探讨 （矿
下载:41
5 ICP-MS/MS测定有色金属中
下载:37
6 电位滴定法在北矿检测实验室的应
下载:33
7 电位滴定仪在有色金属分析的应用
下载:32
8 国家标准《铜精矿及主要含铜物料
下载:32
9 全面禁止洋垃圾入境形势下的固废
下载:32
10 金精矿制样与分析方法的研究
下载:32
第二届关键基础材料模拟、制备与评价技术交流会
推广

热门技术
更多+

1压力平衡机构
2防爆阀保护膜
3水电站的尾水预埋件
4化工矿产有色金属的检测机构
5矿石分类与实时定量分析的光谱检测新方法
6矿石中有色金属成分和含量的检测装置
7有色金属现货状态评估系统及方法
8有色金属废料中铁磁性杂质检测设备及检测工艺
9高温熔体缓冷装置及渣包测温方法
10便携式矿山测量激光仪
衡水宏运压滤机有限公司
宣传
环磨科技控股（集团）有限公司
宣传

发布

在线客服

公众号

电话

顶部
咨询电话：
010-88793500-807
专利人/作者信息登记