用户组:游客
本帖最后由 pig2 于 2014-4-4 23:42 编辑 mapreduce如何处理压缩文件? 当mapreduce的输出文件需要压缩时,该如何设置? 对m ...
本帖最后由 pig2 于 2014-4-4 23:27 编辑 1.CompressionCodec的作用是什么? 2.CompressionCodec用什么方法解压和压缩? 3.C ...
本帖最后由 pig2 于 2014-4-4 23:09 编辑 1.为什么进行文件压缩? 2.hadoop支持哪几种压缩格式? 3.快速压缩该如何表示? 4 ...
本帖最后由 pig2 于 2014-4-4 23:05 编辑 1.hadoop数据完整性是为了解决什么问题? 2.hadoop通过什么方式来来校验数据完成行 ...
本帖最后由 pig2 于 2014-4-5 21:00 编辑 Container命令是通过什么发起的? Container命令由谁来完成? Container启动过程经 ...
本帖最后由 pig2 于 2014-4-5 21:00 编辑 ResourceManager分配任务时,什么情况下会减少任务数目? NodeManager如何检测节点 ...
本帖最后由 pig2 于 2014-4-5 20:58 编辑 NM与RM通信的唯一通道是什么?ContainerManager包含哪些子组件?ResourceLocalizationS ...
本帖最后由 pig2 于 2014-4-3 10:28 编辑 1、NodeManager管理部分有哪些服务构成? 2、这些服务是怎样工作的?
本帖最后由 pig2 于 2014-4-1 03:12 编辑 什么是YARNe? 什么是HDFS Federation? 扩充: hadoop2与hadoop1做了哪些改变 ...
本帖最后由 pig2 于 2014-3-28 18:08 编辑 简介 我们在hadoop深入研究:(一)——hdfs介绍里已讲过,hdfs并不擅长存储小文件, ...
hadoop2.2编程:如何自定义hadoop map/reduce输入文件切割InputFormat?
Hadoop基本流程一个图片太大了,只好分割成为两部分。根据流程图来说一下具体一个任务执行的情况。 [*]在分布式环境中客户端创 ...
── 分布式计算开源框架Hadoop入门实践(一)在SIP项目设计的过程中,对于它庞大的日志在开始时就考虑使用任务分解的多线程处理 ...
在前一篇文章“Hadoop升级方案(二):从Hadoop 1.0升级到2.0(1)”中,我已经介绍了如何从Hadoop 1.0升级到2.0,且启用2.0的HA ...
1. NodeManager相关配置参数 (1) yarn.nodemanager.resource.memory-mb 参数解释:NodeManager总的可用物理内存。注意, ...
注意,配置这些参数前,应充分理解这几个参数的含义,以防止误配给集群带来的隐患。另外,这些参数均需要在yarn-site.xml中配置 ...
本版积分规则 发表帖子
查看 »