分享

cdh 4.1.2 不能格式化想了很多方法都不行,各位帮忙看看

kaka100 发表于 2015-9-15 16:31:53 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 6 12914

出错:
FATAL namenode.NameNode (NameNode.java:main(1208)) - Exception in namenode join
java.lang.IllegalArgumentException: URI has an authority component

环境 cdh4.1.2  安装方式tar 解决配置安装

我认为是路径不正确
file:///
file:/
/data/hadoop/hdfs/tmp
都不行

我看到网上有朋友讲看日志,可是我在日志目录中没找到日志内容????

配置文件如下
core-site.xml

<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://ns1</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>file:/data/hadoop/hdfs/tmp</value>
</property>
<property>
<name>ha.zookeeper.quorum</name>
<value>master:2181,slave1:2181,slave2:2181</value>
</property>
</configuration>


hdfs-site.xml<configuration>
<property>
<name>dfs.nameservices</name>
<value>ns1</value>
</property>
<property>
<name>dfs.ha.namenodes.ns1</name>
<value>nn1,nn2</value>
</property>
<property>
<name>dfs.namenode.rpc-address.ns1.nn1</name>
<value>master:9000</value>
</property>
<property>
<name>dfs.namenode.http-address.ns1.nn1</name>
<value>master:50070</value>
</property>
<property>
<name>dfs.namenode.rpc-address.ns1.nn2</name>
<value>slave1:9000</value>
</property>
<property>
<name>dfs.namenode.http-address.ns1.nn2</name>
<value>slave1:50070</value>
</property>
<property>
<name>dfs.namenode.shared.edits.dir</name>
<value>qjournal://master:8485;slave1:8485;slave2:8485/ns1</value>
</property>
<property>
<name>dfs.journalnode.edits.dir</name>
<value>file:/data/hadoop/hdfs/journal/</value>
</property>
<property>
<name>dfs.ha.automatic-failover.enabled</name>
<value>true</value>
</property>
<property>
<name>dfs.client.failover.proxy.provider.ns1</name>
<value>org.apache.hadoop.hdfs.server.namenode.ha.ConfiguredFailoverProxyProvider</value>
</property>
<property>
<name>dfs.ha.fencing.methods</name>
<value>
sshfence
shell(/bin/true)
</value>
</property>
<property>
<name>dfs.ha.fencing.ssh.private-key-files</name>
<value>file:/home/hadoop/.ssh/id_rsa</value>
</property>
<property>
<name>dfs.ha.fencing.ssh.connect-timeout</name>
<value>30000</value>
</property>
</configuration>





已有(6)人评论

跳转到指定楼层
NEOGX 发表于 2015-9-15 17:15:44


下面配置不要换行
<property>
<name>dfs.ha.fencing.methods</name>
<value>
sshfence
shell(/bin/true)
</value>


尝试这样配置
   <name>dfs.ha.fencing.methods</name>
   <value>sshfence</value>

回复

使用道具 举报

kaka100 发表于 2015-9-15 18:42:55

<property>
<name>dfs.ha.fencing.methods</name>
<value>sshfence</value>
</property>

改了不行,问题依就  

还是要谢谢NEOGX
回复

使用道具 举报

NEOGX 发表于 2015-9-15 20:29:14
kaka100 发表于 2015-9-15 18:42
dfs.ha.fencing.methods
sshfence

从提供的信息来看,只能判断这些了,看看其它方面的问题
回复

使用道具 举报

kaka100 发表于 2015-9-15 22:03:07
调试几方法,也看看了没办法
NEOGX 您哪有 CDH 4 配置文件吗?

要不我下载一份改改看
回复

使用道具 举报

NEOGX 发表于 2015-9-16 12:32:58
kaka100 发表于 2015-9-15 22:03
调试几方法,也看看了没办法
NEOGX 您哪有 CDH 4 配置文件吗?

这是cdh5的,cdh4已经过时了

Cloudera Manager5及CDH5在线(cloudera-manager-installer.bin)安装详细文档
http://www.aboutyun.com/thread-9303-1-1.html



cloudera CDH 官网介绍、零基础入门线路指导、安装部署、卸载等文档汇总
http://www.aboutyun.com/thread-12097-1-1.html



回复

使用道具 举报

kaka100 发表于 2015-9-24 16:09:22
谢谢问题找到了

1:路径必须是绝对
file:/home/hadoop/.ssh/id_rsa  报错改成 /home/hadoop/.ssh/id_rsa
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条