分享

关于mr1和mr2结构的一点疑问

jchubby 发表于 2016-3-16 20:37:11 [显示全部楼层] 只看大图 回帖奖励 阅读模式 关闭右栏 11 20776
jchubby 发表于 2016-3-17 22:13:27
atsky123 发表于 2016-3-17 22:04
每一个tasktracker同时运行的 任务数 ,tasktracker跟节点没有关系的

那么请问怎么确定节点上能启动的tasktracker数量呢?查了很多资料都不明白
回复

使用道具 举报

wscl1213 发表于 2016-3-21 16:46:00
jchubby 发表于 2016-3-17 22:13
那么请问怎么确定节点上能启动的tasktracker数量呢?查了很多资料都不明白

这个是有yarn来分配的,还有需要的资源有关系。即使提前分配了,也会根据实际情况。
其实楼主就是不懂mapreduce得map数量和reduce的数量

下面楼主多看几遍,相信就可以了
hadoop中map和reduce的数量设置
http://www.aboutyun.com/forum.php?mod=viewthread&tid=5583

如何确定 Hadoop map和reduce的个数--map和reduce数量之间的关系是什么?

http://www.aboutyun.com/forum.php?mod=viewthread&tid=6945


他们计算比较复杂的
回复

使用道具 举报

12
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条