分享

Mapreduce 整个工作机制图

 
lzw 发表于 2013-12-1 20:53:58 [显示全部楼层] 只看大图 回帖奖励 阅读模式 关闭右栏 70 153140
一晌贪欢 发表于 2015-7-20 16:07:08
摸索学习中。。。
回复

使用道具 举报

drizt007 发表于 2015-8-4 09:40:07
每次Reduce 都是只处理一组数据吗?(一组[k,v])
  如果有4个cluster{k1,[v1,v2,v3,v4]},{k2,[v1,v2,v3,v4]},{k3,[v1,v2,v3,v4]},{k4,[v1,v2,v3,v4]}
 2个Reduce   那也是 每个Reduce 处理完一组 然后再处理另外一组吗?TT 
   
回复

使用道具 举报

angiely 发表于 2015-8-26 17:24:19
回复

使用道具 举报

zmer 发表于 2015-9-17 01:02:02
两个node之间的交互其实是个抽象概念,不要纠结于这,先是几个node各自执行map阶段;执行完后,reducer所在的node去向执行map的节点抓取数据,然后执行reduce阶段,也就是shuffle过程。
回复

使用道具 举报

dhtbo 发表于 2015-9-24 19:18:06
够深入,支持
回复

使用道具 举报

winning1688888 发表于 2015-11-1 19:18:55
看懂了一点点,hadoop还有很多要学习的,加油
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条