为什么明明输入目录已存在,运行时却依然提示目录不存在呢?

heihei1231 2012-10-10 05:04:53
为什么明明输入目录已存在,运行时却依然提示目录不存在呢?

错误信息:
INFO 10-10 16:30:08,284 - Shell 2 - (stderr) Exception in thread "main" org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist: file:/usr/hadoop/search_log/data_in/2012-10-09

实际用如下命令去浏览该目录时却可以显示所有文件
/hadoop/hadoop/bin/hadoop fs -ls /usr/hadoop/search_log/data_in/2012-10-09


求大家指点。。。
...全文
937 2 打赏 收藏 转发到动态 举报
写回复
用AI写文章
2 条回复
切换为时间正序
请发表友善的回复…
发表回复
cranley 2013-01-08
  • 打赏
  • 举报
回复
hdfs://hdfsmaster_host:port/usr/hadoop/search_log/data_in/2012-10-09
luloolv 2012-12-25
  • 打赏
  • 举报
回复
file:/usr/hadoop/search_log/data_in/2012-10-09 file:/代表的 本地文件路径,也就是你安装hadoop的主机的文件系统 /hadoop/hadoop/bin/hadoop fs -ls /usr/hadoop/search_log/data_in/2012-10-09 hadoop fs -ls 这个查看的是 hdfs文件系统下的文件 建议你检查一下所写程序指定的文件路径是否是 hdfs文件系统下的,在执行mapreduce之间需要将文件推送至hdfs上。

20,808

社区成员

发帖
与我相关
我的任务
社区描述
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
  • 分布式计算/Hadoop社区
  • 涤生大数据
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧