分享

linux下运行自动的wordcount例子,运行时间超级长,报错

centos下运行自带的wordcount,处理时间超级长,最后报了连接超时的错误。
mapreduce1.jpg
error2.jpg

已有(6)人评论

跳转到指定楼层
轩辕依梦Q 发表于 2014-10-11 22:10:28
还有一个问题,这个截图是《细细品味hadoop》系列的,问一下这个user/hadoop是什么目录?安装目录吗?这里的input目录是相对哪个文件的目录?我执行查询的命令必须是hadoop fs -ls  /input ,如果不加/ 就会报错。
prob1.jpg
回复

使用道具 举报

muyannian 发表于 2014-10-11 23:14:21
call from 出现超时,原因很多,参考下面两个帖子:

eclipse运行出现 Call From to master:8020 failed on connection exception

Hadoop2HA ls出现链接失败Call From 192.168.226.92 to cluster:8020

回复

使用道具 举报

muyannian 发表于 2014-10-11 23:16:44
/代表的是hdfs的根目录input不带斜杠,就会找不到目录,所以必须带上
user/hadoop只是一个普通输入路径,这个也可以换成别的。
回复

使用道具 举报

轩辕依梦Q 发表于 2014-10-12 16:22:50
muyannian 发表于 2014-10-11 23:14
call from 出现超时,原因很多,参考下面两个帖子:

eclipse运行出现 Call From to master:8020 failed  ...

在帖子里面没有找到对应的问题,下午执行了一次,成功了,但是中间是有两个错误,而且执行的时间超级长。
12.jpg
回复

使用道具 举报

muyannian 发表于 2014-10-13 00:52:42
轩辕依梦Q 发表于 2014-10-12 16:22
在帖子里面没有找到对应的问题,下午执行了一次,成功了,但是中间是有两个错误,而且执行的时间超级长。 ...
这个不是问题所在,关键看最后结果。
总体来看,可能你的网络有些不太正常。
回复

使用道具 举报

轩辕依梦Q 发表于 2014-10-14 22:33:14
muyannian 发表于 2014-10-13 00:52
这个不是问题所在,关键看最后结果。
总体来看,可能你的网络有些不太正常。




多谢版本,应该是配置的问题,重新配置后,运行正常。
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条