Hadoop MapReduce 原理

原创
2017/04/23 23:17
阅读数 29

MapReduce 执行的三个步骤:
    1. 客户端(Client)提交作业(job)给资源管理器(ResourceManager,RM)
    2. RM 寻找负责人,找对应的应用主管(AppMaster,AM)
    3. AM 接收指令后,开始执行

 

    1. 客户端(Client)提交作业(job)给资源管理器(ResourceManager,RM)
    2. RM把指令传给名称节点管理器,名称管理器返回 job 相关的数据节点,并将这些节点返回给 RM
    3. RM 根据返回的节点,找出可用的数据节点,并发给名称节点管理器,
        名称节点管理器找到对应的数据节点管理器,在数据节点管理器上执行task

 

 

 

展开阅读全文
打赏
0
0 收藏
分享
加载中
更多评论
打赏
0 评论
0 收藏
0
分享
返回顶部
顶部