分享

Hadoop2.5集群安装成功,运行wordcount出错,

roant 发表于 2015-1-18 10:59:59 [显示全部楼层] 只看大图 回帖奖励 阅读模式 关闭右栏 20 27152
stark_summer 发表于 2015-1-19 11:43:31
回复

使用道具 举报

roant 发表于 2015-1-19 18:25:33
这个是等待了很久之后,程序运行终止后给出的错误提示,没看懂,我已经在 /etc/hosts/文件中注释掉了 ubuntu这个映射,为什么还会出现  “ubuntu/101.226.10.8”这个信息提示,,
  1. 127.0.0.1        localhost
  2. #127.0.1.1        ubuntu
  3. 192.168.142.131 master
  4. 192.168.142.132        slave1
  5. 192.168.142.133        slave2
  6. 192.168.142.134        slave3
  7. # The following lines are desirable for IPv6 capable hosts
  8. ::1     ip6-localhost ip6-loopback
  9. fe00::0 ip6-localnet
  10. ff00::0 ip6-mcastprefix
  11. ff02::1 ip6-allnodes
  12. ff02::2 ip6-allrouters
复制代码

exception.PNG

回复

使用道具 举报

langke93 发表于 2015-1-19 18:38:45
roant 发表于 2015-1-19 18:25
这个是等待了很久之后,程序运行终止后给出的错误提示,没看懂,我已经在 /etc/hosts/文件中注释掉了 ubunt ...

host混乱了,仔细检查程序。找到Ubuntu是从那来的
回复

使用道具 举报

langke93 发表于 2015-1-19 19:16:46
roant 发表于 2015-1-19 18:25
这个是等待了很久之后,程序运行终止后给出的错误提示,没看懂,我已经在 /etc/hosts/文件中注释掉了 ubunt ...
注释掉生效了吗,最好重启下
回复

使用道具 举报

roant 发表于 2015-1-19 19:44:13

点评

继续看日志  发表于 2015-1-19 20:06
回复

使用道具 举报

langke93 发表于 2015-1-19 20:18:34
roant 发表于 2015-1-19 19:44
生效了,我同时也更改了 /etc/hostname中的hostname,对应了每台机器的名称,输入hostname时候都显示了指 ...

继续看日志和报错
回复

使用道具 举报

roant 发表于 2015-1-19 20:36:21
langke93 发表于 2015-1-19 20:18
继续看日志和报错

在等待的期间,根本就没有任何的 WARN 或者 ERROR 信息(namenode和datanode上的logs我都查看了),无从下手才来问的~~!
回复

使用道具 举报

langke93 发表于 2015-1-19 22:19:25
roant 发表于 2015-1-19 20:36
在等待的期间,根本就没有任何的 WARN 或者 ERROR 信息(namenode和datanode上的logs我都查看了),无从 ...
说的更详细些,不要只说主观想法。比如:截图,mapreduce到达什么程度了,看的日志,看的什么日志,是否看错日志了。
只有提供了这些信息,才能帮助你解决问题
回复

使用道具 举报

roant 发表于 2015-1-20 10:23:47
运行成功,出来结贴~!希望可以给遇到同样问题的论坛朋友一个参考。(自己的想法,有错的地方希望大神们可以指出来,以免给别人带来错误的参考)
1、master:50070界面虽然显示"live nodes: 2",但实际上进去datanode页面查看,只有一个节点的信息,这个时候集群是非正常启动的,需要重新修改配置文件。所以集群启动成功与否,看datanode界面的响应的节点信息。
2、在修改完“/etc/hosts”文件之后,主机名其实还没有变化,需要在”etc/hostname“文件中进一步修改,如”ubuntu(原始的名称)  --->  你指定的hostname“,,然后重新开一个命令窗口,看@后面的字段是不是更新了,如果没更新,建议你重启一下机器
3、在找错的过程中,看到,yarn框架中你有几个datanode,就要将”replication:datanode数目“字段设置为对应数目
4、在求解的过程中,感谢langke93,desehawk大神的细心解答,谢谢~!
回复

使用道具 举报

hadoop小象 发表于 2015-5-9 11:42:22
我也遇到这问题了,只前跑过没什么问题,你是怎么解决的,replication:datanode在哪配置?
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条