搜索
搜 索
文章
帖子
用户
图文精华
hadoop-2.6.0+zookeeper-3.4.6+hbase-1.0.0+hive-1.1.0完全分布 ...
首页
Portal
专题
BBS
面试
办公|编程助手
更多
登录
注册
用户组:游客
主题
帖子
云币
我的帖子
我的收藏
我的好友
我的勋章
设置
退出
导读
淘贴
博客
群组
社区VIP
APP下载
今日排行
本周排行
本周热帖
本月排行
本月热帖
会员排行
About云-梭伦科技
›
日志
发布
日志
上传
相册
添加
分享
记录
日志
好友的日志
我的日志
随便看看
发表新日志
HDP-v3 study
|
分享
HDP-v3:MR原理及工作机制
june_fu
2015-2-8 23:08
5e: 作业的提交在任何一个节点上都可以做,最终都提交给jobtracker,jobtracker先对数据进行分区(split),一般情况下就是一个block,但不一定,接近block而已(不一定split刚好能够一个block); input------split-----map程序处理----shuffle(sort merge)--------reduce----output combiner 对reduce ...
个人分类:
HDP-v3 study
|
825 次阅读
|
0
个评论
分享
HDP-v3:hdfs fedration and hdfs Snapshot
june_fu
2015-2-1 00:45
HDFS Federation介绍: http://blog.csdn.net/strongerbit/article/details/7013221 非真HA,自动负载均衡比较难做;使得namenode不再单点。 HDFS Snapshot: http://www.aboutyun.com/forum.php?mod=viewthreadtid=10953highlight=snapshot
个人分类:
HDP-v3 study
|
820 次阅读
|
0
个评论
关闭
推荐
/2
中文版ChatGPT
1.无需魔法 2.提高编程效率 3.提高文档能力
查看 »
新手帮助
新手帮助:注册遇到问题,领取资源,加入铁粉群,不会使用搜索,如何获取积分等
查看 »
意见
反馈