用户组:游客
编译类的帖子都不通用,还是希望能给大家提供些帮助: MAC OS环境下编译,首先要看一手资料: 下载源码包,解压,进入目录,vi ...
今天检查磁盘空间时,发现这个目录占的空间挺大的,想咨询一下,yarn.nodemanager.local-dirs 这个目录文件是否可以删除。删除 ...
新手,用vm做4个虚拟机,加载centos7,加载hadoop3.0.3,4个节点为master、slave1、slave2、slave3,网络通常,可以互ping,虚拟 ...
我的core-site.xml中的hadoop.tmp.dir为file:/usr/hadoop/tmp,也格式化了namenode,为什么我的日志还保存在logs下,而且tmp ...
跪求大佬解答! 集群资源在利用了70%的情况下,在hive中执行操作一直等待,直到失败。 看了下yarn的日志,在container状态转 ...
hadoop 性能调优,减少map端的spill, 增大io.sort.mb,但是我怎么知道到底有没有减少spill的次数,在哪里查看呢?
如题,只需要map过程,分片处理一下数据,数据无序,所以用不上sort与shuffle,就想着这么把这两个过程去掉,求前辈们帮忙啊
YARN的调度器设置为capacity调度器,设置两个队列a和b,无嵌套的子队列,capacity分别配置为40%和60%,max capacity分别设置为40 ...
gzip 格式shi使用DEFLATE 算法来存储压缩后的数据,将数据存储在一系列连续的压缩块中,所以说如果是连续的压缩块中,那么就是存 ...
各位老铁我启动Hadoop的时候怎么活节点都为0,这是什么情况 格式化了多次,知道的大佬跟我说一下谢谢,我只是启 ...
我在阿里云服务器上运行的作业,然后Hadoop的网站上并没有显示,求大神问一下这是什么原因,我的阿里云安全组的8088端口出和入 ...
我目前在读研,老师让我自己选了个方向,我就选择了hadoop的作业调度,但是学习了一阵过后发现,虽然有很多介绍方法的论文,但是 ...
window远程连接hadoop集群,本地是否需要搭建hadoop。 一些初学者,可能会产生这样的想法,本地特别是window是不需要搭建一套ha ...
求教 请教一下这几个题目主要用的命令。。
Hadoop2.7.2最多支持几个secondarynamenode?我3个节点,hosta,hostb,hostc master:hosta 我想让hostb/hostsc承担secondarynam ...
各位同学好, 公司有个小规模的hadoop 集群 版本是 1.0 所运行的组件 有 hive hue pig sqoop hbase azkaban 暂时 ...
hadoop-hdfs启动又自动退出的问题,折腾了我1天时间啊! 日志如下: 2010-05-19 12:47:44,991 INFO http.HttpServer - Versi ...
如题,问hadoop2是如何解决NameNode单点故障的?
新人,求高手指占一下,困扰很久了,现在是这样,三台主机,两台做namenode,三台上都启datanode,namenode做ha,切换的时候,用 ...
现在做一个项目,需求如下,遇到点问题,请大家帮助思考下: 运行一个监控网站,其中有一个界面是显示Hadoop集群的50070页面里 ...
我现在想在一台服务器上安装flume,然后把flume收集到的信息存到hadoop集群里(flume和hadoop集群在同一个网段内)能否实现?
hadoop job -list RsvdMem这个字段表示什么
都知道hadoop处理数据能力很强,在日志处理,用户行为分析,个性化推荐,网络资源检索方面都有很强的实践。 那么它能够处理体检 ...
菜鸟请教:Hadoop-eclipse-plugin无需密码即可可直接浏览HDFS,是否有设置可限制访问?谢谢!
Hadoop1.x集群机制中NameNode只能只有一个。那如果NameNode再宏机的情况下,是什么处理的。请大神讲解一下?
哪里有比较完整的hadoop视频教程?
在Hadoop中用ArrayList有什么问题没 把每个key对应的values放到List中 然后遍历List 值就变了 怎么回事啊?
搭建源代码环境,如何找到org.apache.bookkeeper
之前搭建是在外网,现在集群搭建成功!!要回迁到机房内网,所有ip都要变换,请问做这样的操作在改配置ip之后,会对hdfs文件系统 ...
集群中namenode和jobtracker是分开的,但是每次关闭和启动都需要手动启动!?????
本版积分规则 发表帖子
查看 »