分享

MapReduce的警告

我在执行自己写的程序的时候,hadoop出现了警告:具体内容请看MapReduce不能成功输出
WARN mapreduce.JobResourceUploader: Hadoop command-line option parsing not performed. Implement the Tool interface and execute your application with ToolRunner to remedy this.

自己写的程序

自己写的程序

最后就没有成功写出数据,

2.png
执行wordcount列子就没有任何的警告且能够输出结果


有人知道这到底是什么问题吗?

已有(3)人评论

跳转到指定楼层
easthome001 发表于 2018-5-23 10:48:11
可能是分区函数或则重写了write导致的。

回复

使用道具 举报

ww8605853 发表于 2018-5-23 19:20:06
easthome001 发表于 2018-5-23 10:48
可能是分区函数或则重写了write导致的。

你好,谢谢你,但是你可以详细一点吗?刚接触的,不是太明白
回复

使用道具 举报

ww8605853 发表于 2018-5-25 21:48:44
终于找到了问题所在,在这里简单说一下,在这个过程中,因为是新手,对于排除错误的方法,其实就是那么几个,第一,看看官方列子是否可以执行,如果可以执行,说明环境没有太大问题,第二,检查自己的代码是否有问题,第三,就是检查一下你准备的数据格式是否正确了,我就是初心将数据格式弄错了!!
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条