用户组:游客
问题导读 1.Hadoop 设置map的个数后为什么不生效? 2.map的个数有什么来决定? 3.如何确定分片的大小? 4.reduce个数该如 ...
本帖最后由 levycui 于 2018-11-28 10:20 编辑 问题导读: 1、Hadoop集群大量小文件对集群造成什么影响? 2、如何使用hdfs o ...
问题导读: 1.什么情况下不建议对小文件使用纠删码策略?2.怎样进行机架容错?3.如何根据文件大小以及纠删码策略计算block grou ...
问题导读: 1.如何使用Scala代码访问Kerberos环境的HDFS?2.怎样导出Kerberos集群中访问HDFS的keytab文件?3.怎样实现客户端 ...
本帖最后由 levycui 于 2018-11-13 22:40 编辑 问题导读: 1、如何进行时钟同步? 2、如何安装Kerberos客户端? 3、Kerbero ...
问题导读: 1.什么是纠删码?2.HDFS中怎样实现的纠删码?3.Erasure Coding技术有哪些优劣势? 最新经典文章,欢迎关注 ...
问题导读 1.Hadoop3.x通过什么方式来容错? 2.Hadoop3.x存储开销减少了多少? 3.Hadoop3.x MR API是否兼容hadoop1.x? ...
本帖最后由 yuwenge 于 2018-6-25 16:28 编辑 问题导读 1.如何使用cgroup来隔离cpu资源? 2.如何安装cgroup? 3.本文遇到 ...
问题导读 1.当抢占资源服务启动时,会启动一个线程每隔多长时间调用一次? 2.抢占资源的策略是什么? 3.什么情况下,强制 ...
问题导读 1.Yarn Service是用来做什么的? 2.YARN 是否支持基于 GPU 的调度和隔离? 3.对于资源的配置如内存数量、vcore ...
注:本文来自个人博客www.zhuyongpeng.cn 1、概要 2、主要变动介绍总架构的改变>> 1. Shell脚本重写(1)增加了参数冲突检测 ...
本帖最后由 desehawk 于 2018-1-21 21:08 编辑 在运行hadoop集群过程中,hadoop数据量大的情况下,会造成死机,停止hdfs和yarn ...
Hadoop3.0扩展Yarn资源,官网给了一些英文资料,这里about云翻译为中文资料。这些资料,还是比较多的,但是在初次阅读的时候 ...
问题导读 1.磁盘IO实现共享,使用的是什么原理技术? 2.如何描述磁盘I / O资源? 3.磁盘I / O资源中的调度因素如何? 4.每 ...
问题导读 1.Resource profiles解决了什么问题? 2.使用profile的好处是什么? 3.配置文件的简洁模式如何配置? 上一 ...
转载注明来自about云 本文链接: http://www.aboutyun.com/forum.php?mod=viewthread&tid=23796 【此篇与第一篇合并。替换 ...
问题导读 1.countable资源是指哪些? 2.noncountable资源,本文列举了什么资源? 3.标签是否为资源? 4.如何实现扩展YARN ...
问题导读 1.hadoop3.x检测虚拟内存的情况下,可能会产生什么问题? 2.hadoop3.x中,下面各个配置的作用是什么? 3.dfs.bloc ...
本帖最后由 pig2 于 2018-1-10 15:28 编辑 问题导读 1.如何指定hadoop临时路径? 2.dfs.blocksize可以使用那些单位? 3.m ...
问题导读 1.hadoop3.0slaves做了什么更改? 2.如何单独启动DataNode? 3.访问hadoop web界面都有哪些接口? 上一篇 ...
问题导读 1.yarn-site配置文件,主要配置哪两个进程? 2.mapred-site.xml配置文件,配置哪些内容? 3.hadoop如何配置监测No ...
折腾了大半个晚上终于部署成功了,比在Linux上面稍微复杂一点,详细步骤如下: 1) jdk、ant、hadoop环境变量配置2) 分别将had ...
问题导读 1.本文是如何定义master的? 2.如何配置hadoop守护进程环境? 3.配置Hadoop守护进程需要哪些配置文件? ...
本帖最后由 desehawk 于 2017-12-28 14:55 编辑 问题导读 1.什么是TC? 2.什么是qdisc 队列规则(queueing discipline)? ...
问题导读 1.本文讲了哪些配置项? 2.DistributedShell是否可以让用户指定网络带宽? 3.hadoop3.0网络设计存在哪些已知的问 ...
问题导读 1.网络作为Yarn的资源,有什么好处? 2.Yarn是否只支持调度和强制执行“传出流量”? 3.Yarn是否支持入口流量? ...
hadoop3.1资源类型支持比如: disk(YARN-2139), network(YARN-2140), and HDFS 带宽(YARN-2681). 链接: 磁盘(disk) https ...
本帖最后由 pig2 于 2017-12-23 15:13 编辑 问题导读 1.yarn默认情况下使用哪些资源? 2.Yarn如何实现扩展自定义资源? 3 ...
问题导读 1.hadoop3.0为什么改变端口? 2.hadoop3.0改变了哪些端口? 3.KMS服务器端口号为何修改? 为什么改 ...
问题导读 1.容器新增加了哪个概念? 2.Opportunistic类型容器有什么特点? 3.为何说Opportunistic类型容器提高集群效率? ...
本版积分规则 发表帖子
查看 »