日志
- 分享
HDP-v3:MR原理及工作机制
-
2015-2-8 23:08
-
5e： 作业的提交在任何一个节点上都可以做，最终都提交给jobtracker，jobtracker先对数据进行分区（split），一般情况下就是一个block，但不一定，接近block而已（不一定split刚好能够一个block）； input------split-----map程序处理----shuffle(sort merge)--------reduce----output combiner 对reduce ...
-
个人分类: HDP-v3 study|825 次阅读|0 个评论
- 分享
HDP-v3:hdfs fedration and hdfs Snapshot
-
2015-2-1 00:45
-
HDFS Federation介绍: http://blog.csdn.net/strongerbit/article/details/7013221 非真HA，自动负载均衡比较难做；使得namenode不再单点。 HDFS Snapshot: http://www.aboutyun.com/forum.php?mod=viewthreadtid=10953highlight=snapshot
-
个人分类: HDP-v3 study|818 次阅读|0 个评论
- 新手帮助
- 新手帮助：注册遇到问题，领取资源，加入铁粉群，不会使用搜索，如何获取积分等
查看 »
/2 
