用户组:游客
新手,用vm做4个虚拟机,加载centos7,加载hadoop3.0.3,4个节点为master、slave1、slave2、slave3,网络通常,可以互ping,虚拟 ...
求教 请教一下这几个题目主要用的命令。。
在Hadoop中用ArrayList有什么问题没 把每个key对应的values放到List中 然后遍历List 值就变了 怎么回事啊?
gzip 格式shi使用DEFLATE 算法来存储压缩后的数据,将数据存储在一系列连续的压缩块中,所以说如果是连续的压缩块中,那么就是存 ...
我在阿里云服务器上运行的作业,然后Hadoop的网站上并没有显示,求大神问一下这是什么原因,我的阿里云安全组的8088端口出和入 ...
Hadoop1.x集群机制中NameNode只能只有一个。那如果NameNode再宏机的情况下,是什么处理的。请大神讲解一下?
最终确定要做5种类型的推荐,每种推荐类型及需要的数据简要叙述如下: 1、根据商品id获得所属类别的销售排行榜 * 商品id * ...
现在hadoop集群中namenode所在的机器有了其他用途,需要把nanenode迁移到另外的一台机器,怎么在不保证数据丢失的情况下,正常迁 ...
跪求大佬解答! 集群资源在利用了70%的情况下,在hive中执行操作一直等待,直到失败。 看了下yarn的日志,在container状态转 ...
YARN的调度器设置为capacity调度器,设置两个队列a和b,无嵌套的子队列,capacity分别配置为40%和60%,max capacity分别设置为40 ...
集群中namenode和jobtracker是分开的,但是每次关闭和启动都需要手动启动!?????
如何模拟在hadoop环境下测试单点故障?
setSortComparatorClass是用来对key进行排序的,传入的参数是:RawComparator的子类 setGroupingComparatorClass 是用来对key ...
我现在想在一台服务器上安装flume,然后把flume收集到的信息存到hadoop集群里(flume和hadoop集群在同一个网段内)能否实现?
新人,求高手指占一下,困扰很久了,现在是这样,三台主机,两台做namenode,三台上都启datanode,namenode做ha,切换的时候,用 ...
Hadoop2.7.2最多支持几个secondarynamenode?我3个节点,hosta,hostb,hostc master:hosta 我想让hostb/hostsc承担secondarynam ...
linux菜鸟,有个问题。 在root安装了jdk 执行java -version 可以看到jdk版本信息。而用另外一个用户test登录 执行java -version ...
我最近在研究hadoop的源码,重点学习HDFS,mapreduce 感觉不怎么实用,没有hive,pig等实用 请问,学习hadoop是以HDFS,mapr ...
比如说:luence,Solr
碰到一个奇怪的问题 在虚拟机上搭的一个伪分布式 在core-site.xml mapred-site.xml 都使用的localhost 在window上使用hadoop插件 ...
hadoop 性能调优,减少map端的spill, 增大io.sort.mb,但是我怎么知道到底有没有减少spill的次数,在哪里查看呢?
如题,只需要map过程,分片处理一下数据,数据无序,所以用不上sort与shuffle,就想着这么把这两个过程去掉,求前辈们帮忙啊
之前搭建是在外网,现在集群搭建成功!!要回迁到机房内网,所有ip都要变换,请问做这样的操作在改配置ip之后,会对hdfs文件系统 ...
现在做一个项目,需求如下,遇到点问题,请大家帮助思考下: 运行一个监控网站,其中有一个界面是显示Hadoop集群的50070页面里 ...
如题,问hadoop2是如何解决NameNode单点故障的?
各位同学好, 公司有个小规模的hadoop 集群 版本是 1.0 所运行的组件 有 hive hue pig sqoop hbase azkaban 暂时 ...
我目前在读研,老师让我自己选了个方向,我就选择了hadoop的作业调度,但是学习了一阵过后发现,虽然有很多介绍方法的论文,但是 ...
各位老铁我启动Hadoop的时候怎么活节点都为0,这是什么情况 格式化了多次,知道的大佬跟我说一下谢谢,我只是启 ...
hadoop-hdfs启动又自动退出的问题,折腾了我1天时间啊! 日志如下: 2010-05-19 12:47:44,991 INFO http.HttpServer - Versi ...
大虾们 帮忙看看 为什么datanode没有启动呢 查看这个文件 如何查看
本版积分规则 发表帖子
查看 »