MapReduce提交到Yarn上大体执行流程

MapReduce提交到Yarn上大体执行流程

创新互联建站-云计算及IDC服务提供商,涵盖公有云、IDC机房租用、电信内江机房、等保安全、私有云建设等企业级互联网基础服务,服务电话:18980820575

  1. 启动申请提交一个job(wordcount.jar和程序中的配置参数和数据切片规划文件)运行进程为runjar

  2. ResouceManager 会在一台节点NodeManager上先启动客户提交的wordcount.jar的主管进程MRAppMasster

  3. 由主管进程(MRAppMasster)根据启动规则启动mapTask任务(yarnChild进程).如果所有mapTask任务运行结束.MRAppMasster进程会启动Reduce Task任务(yarnChild进程)


标题名称:MapReduce提交到Yarn上大体执行流程
本文地址:http://csruizhi.cn/article/jgdhge.html

其他资讯

Copyright © 2007-2024 成都优众联杰科技有限公司 All Rights Reserved 蜀ICP备2024116266号
友情链接: 网站建设方案 成都网站制作 教育网站设计方案 H5网站制作 企业网站设计 成都网站设计 移动手机网站制作 商城网站建设 成都网站建设 成都定制网站建设 成都网站制作 网站制作 成都做网站建设公司 高端网站设计 成都网站设计 成都网站设计 成都网站设计 重庆网站建设 成都网站设计 成都网站制作 企业网站设计 成都网站建设推广