合肥金星智控科技股份有限公司
宣传

位置：中冶有色 >

有色技术频道 >

有色金属技术

矿山技术

冶金技术

材料制备及加工技术

环境保护技术

分析检测技术

> 分析检测技术

> 失效分析技术

> MapReduce任务的容错调度方法

MapReduce任务的容错调度方法

694   编辑：管理员   来源：中冶有色技术网  
2023-03-19 09:01:43
本发明涉及云计算环境中并行任务的调度处理方法，公开一种针对MapReduce作业的容错调度方法，以提高MapReduce作业的整体性能，减少节点失效时的作业延迟。本发明结合检查点和主动复制两种技术，在Mapper任务执行时创建本地检查点和索引检查点两种检查点，当任务发生失效时，本地检查点能够将出错任务的状态和执行恢复到检查点处，减少了任务的重复执行时间；当发生节点失效时，副本节点能够根据索引检查点快速构造出失效节点上执行的mapper任务的中间结果数据，大大减少了重调度任务的执行时间。实验结果表明该方法能够比Hadoop的运行时性能提高30%以上，同时并不明显增加系统的存储和网络开销。
声明：
“MapReduce任务的容错调度方法” 该技术专利(论文)所有权利归属于技术(论文)所有人。仅供学习研究，如用于商业用途，请联系该技术所有人。
我是此专利(论文)的发明人(作者)
分享 0
         
举报 0
收藏 0
反对 0
点赞 0
标签：
失效分析
上一个：修复存储芯片的方法和装置
下一个：提高网络路由可靠性的方法和装置

与 “MapReduce任务的容错调度方法” 相关技术

▪ 基于智能控制的再生铝冶炼炉
▪ 支架安装方便的太阳能光伏组件
▪ 高强度铝合金材料及其制备方法
▪ 全膜法处理光伏单晶硅片废水回用技术
▪ 含重金属的氨氮废水的处理方法
▪ 可智能调节的光伏板组件支架
▪ 多晶硅生产废水的处理回收系统
▪ 高盐含氨废水处理系统及节能运行工艺
▪ 高效冶金真空吸铝装置
▪ 真空感应熔炼炉可调节自动泄压装置

相关失效分析设备推荐

英思科iTX多气体检测仪
热重分析仪 TG 209 F3 Tarsus®
ROHS检测仪
微粒检测仪 多气体检测仪
impulse x4 便携式四合一检测仪，霍尼韦尔x4多气体检测仪
全国热门有色金属技术推荐
江苏矿山技术 徐州矿山技术 江苏选矿技术 江苏通用技术 徐州通用技术 北京矿山技术 北京采矿技术 北京通用技术 福建矿山技术 福建通用技术 江苏冶金技术 江苏火法冶金技术 北京冶金技术 北京火法冶金技术 北京湿法冶金技术 福建冶金技术 江苏材料制备及加工技术 常州材料制备及加工技术 江苏新能源材料技术 江苏加工技术 北京材料制备及加工技术 福建材料制备及加工技术 江苏环境保护技术 南京环境保护技术 苏州环境保护技术 南通环境保护技术 江苏废水处理技术 江苏固/危废处置技术 北京环境保护技术 北京废水处理技术 第十七届东亚资源再生技术国际会议 中冶有色技术平台 有色金属技术网 中冶有色技术网
展开更多 +

 

中冶有色技术平台微信公众号
了解更多信息请您扫码关注官方微信
中冶有色技术平台微信公众号中冶有色技术平台

最新更新技术

▪基于智能控制的再生铝冶炼炉
▪支架安装方便的太阳能光伏组件
▪高强度铝合金材料及其制备方法
▪全膜法处理光伏单晶硅片废水回用技术
▪含重金属的氨氮废水的处理方法
▪可智能调节的光伏板组件支架
▪多晶硅生产废水的处理回收系统
▪高盐含氨废水处理系统及节能运行工艺
▪高效冶金真空吸铝装置
▪真空感应熔炼炉可调节自动泄压装置

报名参会
更多+

2024全国有色金属分析检测技术交流会
2024全国有色金属分析检测技术交流会
2024年11月27日 ~ 29日
2024退役新能源器件循环利用技术交流会
2024退役新能源器件循环利用技术交流会
2024年11月29日 ~ 12月01日
2024国际新型功能材料与器件会议
2024国际新型功能材料与器件会议
2024年12月06日 ~ 08日
2024盐湖资源综合利用与绿色发展创新论坛
2024盐湖资源综合利用与绿色发展创新论坛
2024年12月13日 ~ 15日
2025全国三稀矿产资源技术交流会
2025全国三稀矿产资源技术交流会
2025年01月03日 ~ 05日

报告下载

1 矿产品能力验证计划中样品的选取
下载:135
2 取、制样安全浅析
下载:121
3 取、制样现状及未来规划/需求
下载:97
4 自动化样品制备助力准确高效的矿
下载:91
5 浅谈质量检验管理风险防控的重点
下载:91
6 样品变质引起采制样和结算问题
下载:89
7 矿产品人工取样方案的制定及案例
下载:86
8 用于X荧光分析的样品前处理及其
下载:83
9 不均匀样品给第三方检测机构和贸
下载:83
10 制样室装修设计技巧
下载:81
2024退役新能源器件循环利用技术交流会
推广

热门技术
更多+

1防爆阀保护膜
2压力平衡机构
3水电站的尾水预埋件
4化工矿产有色金属的检测机构
5矿石分类与实时定量分析的光谱检测新方法
6矿石中有色金属成分和含量的检测装置
7有色金属现货状态评估系统及方法
8有色金属废料中铁磁性杂质检测设备及检测工艺
9高温熔体缓冷装置及渣包测温方法
10便携式矿山测量激光仪
衡水宏运压滤机有限公司
宣传
环磨科技控股（集团）有限公司
宣传

发布

在线客服

公众号

电话

顶部
咨询电话：
010-88793500-807
专利人/作者信息登记