分享

明明输入目录已存在,运行时却依然提示目录不存,是什么原因

heihei1231 发表于 2013-10-16 13:40:49 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 2 5819
本帖最后由 nettman 于 2013-10-27 15:54 编辑

为什么明明输入目录已存在,运行时却依然提示目录不存在呢?
错误信息:
INFO  10-10 16:30:08,284 - Shell 2 - (stderr) Exception in thread "main" org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist: file:/usr/hadoop/search_log/data_in/2012-10-09
实际用如下命令去浏览该目录时却可以显示所有文件
/hadoop/hadoop/bin/hadoop fs -ls /usr/hadoop/search_log/data_in/2012-10-09
求大家指点。。。
              
               
               

已有(2)人评论

跳转到指定楼层
luloolv 发表于 2013-10-16 13:41:45

            file:/usr/hadoop/search_log/data_in/2012-10-09
file:/代表的 本地文件路径,也就是你安装hadoop的主机的文件系统
/hadoop/hadoop/bin/hadoop fs -ls /usr/hadoop/search_log/data_in/2012-10-09
hadoop fs -ls  这个查看的是 hdfs文件系统下的文件
建议你检查一下所写程序指定的文件路径是否是 hdfs文件系统下的,在执行mapreduce之间需要将文件推送至hdfs上。
        
回复

使用道具 举报

cranley 发表于 2013-10-16 13:42:38

            hdfs://hdfsmaster_host:port/usr/hadoop/search_log/data_in/2012-10-09
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条