win10+hadoop-1.2.1版本,运行MR出现问题,求解!

大数据专家傅一航 2015-11-25 11:52:02
我在手提电脑中win10+cygwin64+hadoop1.2.1版本,已经安装成功,HDFS已经能够正常工作。但是在测试MR时,出现如下问题,在网络上搜索了很多,都无法解决,求高手解决。
下面有个faile java.lang.throwable:Chile Error错误,不知道是什么情况?

请不要告诉我应该在linux环境下跑Hadoop之类的话,谢谢!

$ hadoop jar hadoop/hadoop-examples-1.2.1.jar wordcount /input /output

15/11/25 11:38:41 INFO input.FileInputFormat: Total input paths to process : 1
15/11/25 11:38:41 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform. .. using builtin-java classes where applicable
15/11/25 11:38:41 WARN snappy.LoadSnappy: Snappy native library not loaded
15/11/25 11:38:42 INFO mapred.JobClient: Running job: job_201511251059_0001
15/11/25 11:38:43 INFO mapred.JobClient: map 0% reduce 0%
15/11/25 11:38:48 INFO mapred.JobClient: Task Id : attempt_201511251059_0001_m_000002_0, Status : FAI LED
java.lang.Throwable: Child Error

at org.apache.hadoop.mapred.TaskRunner.run(TaskRunner.java:271)
Caused by: java.io.IOException: Task process exit with nonzero status of -1.
at org.apache.hadoop.mapred.TaskRunner.run(TaskRunner.java:258)

15/11/25 11:38:48 WARN mapred.JobClient: Error reading task outputhttp://Orange:50060/tasklog?plainte xt=true&attemptid=attempt_201511251059_0001_m_000002_0&filter=stdout
15/11/25 11:38:48 WARN mapred.JobClient: Error reading task outputhttp://Orange:50060/tasklog?plainte xt=true&attemptid=attempt_201511251059_0001_m_000002_0&filter=stderr
15/11/25 11:38:51 INFO mapred.JobClient: Task Id : attempt_201511251059_0001_m_000002_1, Status : FAI LED
java.lang.Throwable: Child Error
at org.apache.hadoop.mapred.TaskRunner.run(TaskRunner.java:271)
Caused by: java.io.IOException: Task process exit with nonzero status of -1.
at org.apache.hadoop.mapred.TaskRunner.run(TaskRunner.java:258)

15/11/25 11:38:52 WARN mapred.JobClient: Error reading task outputhttp://Orange:50060/tasklog?plainte xt=true&attemptid=attempt_201511251059_0001_m_000002_1&filter=stdout
15/11/25 11:38:52 WARN mapred.JobClient: Error reading task outputhttp://Orange:50060/tasklog?plainte xt=true&attemptid=attempt_201511251059_0001_m_000002_1&filter=stderr
15/11/25 11:38:55 INFO mapred.JobClient: Task Id : attempt_201511251059_0001_m_000002_2, Status : FAI LED
java.lang.Throwable: Child Error
at org.apache.hadoop.mapred.TaskRunner.run(TaskRunner.java:271)
Caused by: java.io.IOException: Task process exit with nonzero status of -1.
at org.apache.hadoop.mapred.TaskRunner.run(TaskRunner.java:258)

15/11/25 11:38:55 WARN mapred.JobClient: Error reading task outputhttp://Orange:50060/tasklog?plainte xt=true&attemptid=attempt_201511251059_0001_m_000002_2&filter=stdout
15/11/25 11:38:55 WARN mapred.JobClient: Error reading task outputhttp://Orange:50060/tasklog?plaintext=true&attemptid=attempt_201511251059_0001_m_000002_2&filter=stderr
15/11/25 11:39:01 INFO mapred.JobClient: Task Id : attempt_201511251059_0001_m_000001_0, Status : FAILED
java.lang.Throwable: Child Error
at org.apache.hadoop.mapred.TaskRunner.run(TaskRunner.java:271)
Caused by: java.io.IOException: Task process exit with nonzero status of -1.
at org.apache.hadoop.mapred.TaskRunner.run(TaskRunner.java:258)

15/11/25 11:39:02 WARN mapred.JobClient: Error reading task outputhttp://Orange:50060/tasklog?plaintext=true&attemptid=attempt_201511251059_0001_m_000001_0&filter=stdout
15/11/25 11:39:02 WARN mapred.JobClient: Error reading task outputhttp://Orange:50060/tasklog?plaintext=true&attemptid=attempt_201511251059_0001_m_000001_0&filter=stderr
15/11/25 11:39:05 INFO mapred.JobClient: Task Id : attempt_201511251059_0001_m_000001_1, Status : FAILED
java.lang.Throwable: Child Error
at org.apache.hadoop.mapred.TaskRunner.run(TaskRunner.java:271)
Caused by: java.io.IOException: Task process exit with nonzero status of -1.
at org.apache.hadoop.mapred.TaskRunner.run(TaskRunner.java:258)

15/11/25 11:39:05 WARN mapred.JobClient: Error reading task outputhttp://Orange:50060/tasklog?plaintext=true&attemptid=attempt_201511251059_0001_m_000001_1&filter=stdout
15/11/25 11:39:05 WARN mapred.JobClient: Error reading task outputhttp://Orange:50060/tasklog?plaintext=true&attemptid=attempt_201511251059_0001_m_000001_1&filter=stderr
15/11/25 11:39:08 INFO mapred.JobClient: Task Id : attempt_201511251059_0001_m_000001_2, Status : FAILED
java.lang.Throwable: Child Error
at org.apache.hadoop.mapred.TaskRunner.run(TaskRunner.java:271)
Caused by: java.io.IOException: Task process exit with nonzero status of -1.
at org.apache.hadoop.mapred.TaskRunner.run(TaskRunner.java:258)

15/11/25 11:39:08 WARN mapred.JobClient: Error reading task outputhttp://Orange:50060/tasklog?plaintext=true&attemptid=attempt_201511251059_0001_m_000001_2&filter=stdout
15/11/25 11:39:08 WARN mapred.JobClient: Error reading task outputhttp://Orange:50060/tasklog?plaintext=true&attemptid=attempt_201511251059_0001_m_000001_2&filter=stderr
15/11/25 11:39:11 INFO mapred.JobClient: Job complete: job_201511251059_0001
15/11/25 11:39:11 INFO mapred.JobClient: Counters: 4
15/11/25 11:39:11 INFO mapred.JobClient: Job Counters
15/11/25 11:39:11 INFO mapred.JobClient: SLOTS_MILLIS_REDUCES=0
15/11/25 11:39:11 INFO mapred.JobClient: Total time spent by all reduces waiting after reserving slots (ms)=0
15/11/25 11:39:11 INFO mapred.JobClient: SLOTS_MILLIS_MAPS=25142
15/11/25 11:39:11 INFO mapred.JobClient: Total time spent by all maps waiting after reserving slots (ms)=0
...全文
919 2 打赏 收藏 转发到动态 举报
写回复
用AI写文章
2 条回复
切换为时间正序
请发表友善的回复…
发表回复
  • 打赏
  • 举报
回复
改为虚拟机了,windows太难搞。
  • 打赏
  • 举报
回复
同样碰到这个问题,一周了,没搞定,请问楼主解决了吗?
想每月25号,信用卡自动还款想每年4月1日自己给当年暗恋女神发一封匿名贺卡想每隔1小时,备份一下自己的爱情片 学习笔记到云盘这些问题总结起来就是:在某一个有规律的时间点干某件事。并且时间的触发的条件可以非常复杂(比如每月最后一个工作日的17:50),复杂到需要一个专门的框架来干这个事。 以上这些是我们日常常见的任务调度需求,企业里面会有大量的任务调度需求,可以说任务调度是一个企业很重要的一部分。传统的定时任务有很多的缺点,1、不支持集群:集群情况下容易造成任务重复问题2、不支持失败重试:失败即结束,不支持重试3、不支持动态调整:修改任务参数时需要修改代码,并且要重启服务4、无报警机制:任务失败后没有提醒功能5、无统一管理:没有办法手动关闭或开启任务针对上面的一些问题和缺点,XXL-JOB可以实现我们的需求。 XXL-JOB是一个开源的,具有丰富的任务管理功能以及高性能,高可用等特点的轻量级分布式任务调度平台,其核心设计目标是开发迅速、学习简单、轻量级、易扩展、开箱即用!!! 课程会带大家构建XXL-JOB调度平台,实战讲解多种类型任务调度配置,会基于大数据推荐系统案例讲解XXL-JOB使用,让大家在实战中掌握XXL-JOB。课程所用的开发环境为:Window10 开发工具:IDEA 本课程用到技术:XXL-JOBKafkaHiveHadoopSparkFlumeMySQLZookeeper等 

932

社区成员

发帖
与我相关
我的任务
社区描述
云计算 云存储相关讨论
社区管理员
  • 云存储
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧