合肥金星智控科技股份有限公司
宣传

位置：中冶有色 >

有色技术频道 >

有色金属技术

矿山技术

冶金技术

材料制备及加工技术

环境保护技术

分析检测技术

> 分析检测技术

> 失效分析技术

> MapReduce任务的容错调度方法

MapReduce任务的容错调度方法

708   编辑：管理员   来源：中冶有色技术网  
2023-03-19 09:01:43
本发明涉及云计算环境中并行任务的调度处理方法，公开一种针对MapReduce作业的容错调度方法，以提高MapReduce作业的整体性能，减少节点失效时的作业延迟。本发明结合检查点和主动复制两种技术，在Mapper任务执行时创建本地检查点和索引检查点两种检查点，当任务发生失效时，本地检查点能够将出错任务的状态和执行恢复到检查点处，减少了任务的重复执行时间；当发生节点失效时，副本节点能够根据索引检查点快速构造出失效节点上执行的mapper任务的中间结果数据，大大减少了重调度任务的执行时间。实验结果表明该方法能够比Hadoop的运行时性能提高30%以上，同时并不明显增加系统的存储和网络开销。
声明：
“MapReduce任务的容错调度方法” 该技术专利(论文)所有权利归属于技术(论文)所有人。仅供学习研究，如用于商业用途，请联系该技术所有人。
我是此专利(论文)的发明人(作者)
分享 0
         
举报 0
收藏 0
反对 0
点赞 0
标签：
失效分析
上一个：修复存储芯片的方法和装置
下一个：提高网络路由可靠性的方法和装置

与 “MapReduce任务的容错调度方法” 相关技术

▪ 南科大《AEM》：双位点锚定实现垂直分子取向，提升全钙钛矿叠层太阳能电池效率
▪ 上科大《Nature》：重大突破！魔角石墨烯超导机理研究
▪ 大连理工2篇《Acta Materialia》！高性能合金领域取得新突破
▪ 中国科大《Nature》子刊：实现高密度高可靠性金刚石光学信息存储！
▪ 西安交大Adv.Mater.：77K下复杂浓缩合金创纪录的高强度和韧性
▪ 转化钠离子电池层状氧化物残碱为补钠剂同时稳定其晶格的富钠浆料添加剂
▪ 重庆科技大学CEJ| Ni，Fe激活惰性铜基电催化剂用于高效双功能水分解制氢
▪ 将任何铝废料转化为高纯度铝的新工艺
▪ 有色金属压延加工技术
▪ 铜冶炼渣的选矿技术和难点

相关失效分析设备推荐

土壤重金属检测仪
软磁材料动态测量装置
高低温霍普金森杆
JC-803E 土壤采样器
高温液压拉力试验机
全国热门有色金属技术推荐
江苏矿山技术 徐州矿山技术 江苏选矿技术 江苏通用技术 徐州通用技术 北京矿山技术 北京采矿技术 北京通用技术 福建矿山技术 福建通用技术 江苏冶金技术 江苏火法冶金技术 北京冶金技术 北京火法冶金技术 北京湿法冶金技术 福建冶金技术 江苏材料制备及加工技术 常州材料制备及加工技术 江苏新能源材料技术 江苏加工技术 北京材料制备及加工技术 福建材料制备及加工技术 江苏环境保护技术 南京环境保护技术 苏州环境保护技术 南通环境保护技术 江苏废水处理技术 江苏固/危废处置技术 北京环境保护技术 北京废水处理技术 第十七届东亚资源再生技术国际会议 中冶有色技术平台 有色金属技术网 中冶有色技术网
展开更多 +

 

中冶有色技术平台微信公众号
了解更多信息请您扫码关注官方微信
中冶有色技术平台微信公众号中冶有色技术平台

最新更新技术

▪南科大《AEM》：双位点锚定实现垂直分子取向，提升全钙钛矿叠层太阳能电池效率
▪上科大《Nature》：重大突破！魔角石墨烯超导机理研究
▪大连理工2篇《Acta Materialia》！高性能合金领域取得新突破
▪中国科大《Nature》子刊：实现高密度高可靠性金刚石光学信息存储！
▪西安交大Adv.Mater.：77K下复杂浓缩合金创纪录的高强度和韧性
▪转化钠离子电池层状氧化物残碱为补钠剂同时稳定其晶格的富钠浆料添加剂
▪重庆科技大学CEJ| Ni，Fe激活惰性铜基电催化剂用于高效双功能水分解制氢
▪将任何铝废料转化为高纯度铝的新工艺
▪有色金属压延加工技术
▪铜冶炼渣的选矿技术和难点

报名参会
更多+

2025全国三稀矿产资源技术交流会
2025全国三稀矿产资源技术交流会
2025年01月03日 ~ 05日
2025全国碳纤维与复合材料应用技术创新论坛
2025全国碳纤维与复合材料应用技术创新论坛
2025年01月03日 ~ 05日
第二届全国硫磷钛资源与新能源协同创新发展论坛
第二届全国硫磷钛资源与新能源协同创新发展论坛
2025年01月03日 ~ 05日
第二届中国微细粒矿物选矿技术大会
第二届中国微细粒矿物选矿技术大会
2025年03月25日 ~ 27日
2024新能源矿产资源科技创新发展论坛
2024新能源矿产资源科技创新发展论坛
2025年04月27日 ~ 29日

报告下载

1 矿产品能力验证计划中样品的选取
下载:136
2 取、制样安全浅析
下载:125
3 取、制样现状及未来规划/需求
下载:100
4 自动化样品制备助力准确高效的矿
下载:93
5 浅谈质量检验管理风险防控的重点
下载:92
6 样品变质引起采制样和结算问题
下载:90
7 矿产品人工取样方案的制定及案例
下载:87
8 用于X荧光分析的样品前处理及其
下载:86
9 不均匀样品给第三方检测机构和贸
下载:85
10 制样室装修设计技巧
下载:84
第二届中国微细粒矿物选矿技术大会
推广

热门技术
更多+

1防爆阀保护膜
2压力平衡机构
3水电站的尾水预埋件
4化工矿产有色金属的检测机构
5矿石分类与实时定量分析的光谱检测新方法
6矿石中有色金属成分和含量的检测装置
7有色金属现货状态评估系统及方法
8有色金属废料中铁磁性杂质检测设备及检测工艺
9高温熔体缓冷装置及渣包测温方法
10便携式矿山测量激光仪
衡水宏运压滤机有限公司
宣传
环磨科技控股（集团）有限公司
宣传

发布

在线客服

公众号

电话

顶部
咨询电话：
010-88793500-807
专利人/作者信息登记