用户组:游客
通过FileSystem这个API去访问hdfs上面的文件,需要使用本地库文件libhadoop.so时,当库文件版本不一致时会出现以下异常: ...
本帖最后由 xioaxu790 于 2015-1-4 20:19 编辑 问题导读 1、CDH5.2安装部署,需要哪些条件? 2、需要将哪些文件复制到集群中 ...
本帖最后由 xioaxu790 于 2015-1-4 19:53 编辑 问题导读 1、在Hadoop中, YARN的职责是什么? 2、YARN中处理能力的基本单元是 ...
三台nodemanager,配置高低是1>2>3,尤其3比较低。但是在执行任务时,3获取的任务反而比1,2多。不知道是为什么?如附件中有20个 ...
问题: [root@lsn-linux hadoop-2.6.0]# hadoop fs -ls / 14/12/09 19:43:06 WARN util.NativeCodeLoader: Unable to load n ...
请问:我的每个节点CPU是两核,所以我的yarn.nodemanager.resource.cpu-vcores这个属性设置的就是为2,因为节点实际上只有2core ...
linux服务器上的根目录当初装系统的时候只分了50G,现在hadoop 运行生成的日志文件都保存在这,但是目录一写满,集群就不能用了 ...
Hadoop1.x集群机制中NameNode只能只有一个。那如果NameNode再宏机的情况下,是什么处理的。请大神讲解一下?
这是我的测试集群。 请问,每个节点中Mem Avail的1G内存就代表NodeManager中的最大内存吗? NodeManager最大内存如果是1G ...
请问,我的备节点namenode自动退出了,查看日志如下,有句话是 WARN org.apache.hadoop.hdfs.server.namenode.FSNamesystem: Rep ...
求解hadoop2的伪分布环境搭建的配置文件~谢谢
如何知道hadoop集群中有少节点参加了运算,以及这些节点运行的效率?
hadoop集群忽然变得很慢, hdfs dfs -ls /查询很慢 stop-dfs.sh 停止很慢 start-dfs.sh 启动很慢 这到底是什么原因导致的! ...
Filesystem Size Used Avail Use% Mounted on /dev/mapper/LVM0-LVM0_01 50G 11G 36G 24% / devtmpfs ...
想把hadoop集群做成HA的说,可以在格式化的时候就报错了 貌似是我 HA没为true ? 怎么变true namenode.FSNamesystem: HA Enable ...
如:我使用的是oralce 数据库,table1表中有一千万条数据, 我是不是需要把数据库的数据先导入hdfs中去, 才能做MR分析呢? ...
通过hadoop API 向HDFS写入中文乱码问题怎么解决?
开发hadoop2.5程序,需要导入那些jar包?
我在这里找到了hadoop的依赖 http://search.maven.org/#artifactdetails%7Corg.apache.hadoop%7Chadoop-project%7C2.5.1%7Cpom ...
现在的问题是eclipse连接不上hadoop,老是无止境的在连接,我用的是windows 上的eclipse 远程连接linux core-site.xml中是 hdf ...
1 eclipse中hadoop环境部署概览 eclipse中部署hadoop包括两大部分:hdfs环境部署和mapreduce任务执行环境部署。一般hdfs ...
一开始能运行起来,后来上传个文件,eclipse崩溃了,然后就一直这样了,这是什么问题!
这里把前端时间找一些资料和自己整理的材料一起放出来,希望对大家有帮助。这篇讲的是kerberos的原理 http://my.oschina.net/ps ...
折腾了几天,都在为hdfs配置kerberos,其中的一些经历,希望对其他的同学有帮助。http://my.oschina.net/psuyun/blog/337560
前端时间按照网上的教程从svn(http://svn.apache.org/repos/asf/hadoop/common/tags/release-2.4.1)上检出了hadoop的源代码, ...
如题,在配置如上应用的时候,遇到一个问题“javax.servlet.ServletException: javax.security.auth.login.LoginException: No k ...
本地的hadoop环境为 伪分布式 hadoop 2.5.1 然后,在eclipse里面想测试hdfs java api,环境为maven 如是,就引入了hadoop ...
ResourceManager可以不和namenode部署在同一台机器上么? 如果可以,实际生产环境里面有没有必要把ResourceManager单独部署一台 ...
hadoop2 里面 磁盘预留空间 配置参数 是什么该如何配置 问题来源:about云群
有人知道win7下运行mr报错:Exception in thread "main" org.apache.hadoop.util.Shell$ExitCodeException: 是什么原因么
本版积分规则 发表帖子
查看 »