单词统计job执行了很久都没有完成。
刚刚学习大数据,自己搭建了一个分布式环境,启动成功后可以通过web界面访问,界面如下:

master节点上查看进程如下:
hadoop@master:~/hadoop-2.7.2$ jps
2418 Jps
1879 SecondaryNameNode
2056 ResourceManager
1694 NameNode
执行hadoop_home/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.2.jar 的单词统计demo,命令如下:
hadoop jar hadoop-mapreduce-examples-2.7.2.jar wordcount inputfiles outfiles
inputfiles文件夹已在hdfs上创建,里面有一个txt文件,内容为一边英文新闻,200多单词,执行命令后出现如下日志,并一直卡住不动。
hadoop@master:~/hadoop-2.7.2$ hadoop jar hadoop-mapreduce-examples-2.7.2.jar wordcount inputfiles outfiles
16/06/04 10:58:18 INFO client.RMProxy: Connecting to ResourceManager at master-hadoop/192.168.100.180:8032
16/06/04 10:58:21 INFO input.FileInputFormat: Total input paths to process : 1
16/06/04 10:58:22 INFO mapreduce.JobSubmitter: number of splits:1
16/06/04 10:58:23 INFO mapreduce.JobSubmitter: Submitting tokens for job: job_1465008926631_0002
16/06/04 10:58:24 INFO impl.YarnClientImpl: Submitted application application_1465008926631_0002
16/06/04 10:58:24 INFO mapreduce.Job: The url to track the job: http://master-hadoop:8088/proxy/application_1465008926631_0002/
16/06/04 10:58:24 INFO mapreduce.Job: Running job: job_1465008926631_0002
通过Web界面查看job如下图:

很久很久不动不知道什么问题,请高手指教!

master节点上查看进程如下:
hadoop@master:~/hadoop-2.7.2$ jps
2418 Jps
1879 SecondaryNameNode
2056 ResourceManager
1694 NameNode
执行hadoop_home/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.2.jar 的单词统计demo,命令如下:
hadoop jar hadoop-mapreduce-examples-2.7.2.jar wordcount inputfiles outfiles
inputfiles文件夹已在hdfs上创建,里面有一个txt文件,内容为一边英文新闻,200多单词,执行命令后出现如下日志,并一直卡住不动。
hadoop@master:~/hadoop-2.7.2$ hadoop jar hadoop-mapreduce-examples-2.7.2.jar wordcount inputfiles outfiles
16/06/04 10:58:18 INFO client.RMProxy: Connecting to ResourceManager at master-hadoop/192.168.100.180:8032
16/06/04 10:58:21 INFO input.FileInputFormat: Total input paths to process : 1
16/06/04 10:58:22 INFO mapreduce.JobSubmitter: number of splits:1
16/06/04 10:58:23 INFO mapreduce.JobSubmitter: Submitting tokens for job: job_1465008926631_0002
16/06/04 10:58:24 INFO impl.YarnClientImpl: Submitted application application_1465008926631_0002
16/06/04 10:58:24 INFO mapreduce.Job: The url to track the job: http://master-hadoop:8088/proxy/application_1465008926631_0002/
16/06/04 10:58:24 INFO mapreduce.Job: Running job: job_1465008926631_0002
通过Web界面查看job如下图:

很久很久不动不知道什么问题,请高手指教!
...全文
相关推荐
大数据实验报告Hadoop编程实现wordcount单词统计程序附源码.doc
大数据实验报告 Hadoop 编程实现 wordcount 单词统计程序附源码本实验报告旨在介绍使用 Hadoop 编程实现 wordcount 单词统计程序的步骤和代码实现。
大数据 hadoop mapreduce 词频统计
**运行Job**:配置好MapReduce作业后,提交到Hadoop集群进行执行。集群会自动调度任务,将工作分配给各个节点。5.
fink demo 单词计数
在这个例子中,Flink被用来统计输入流中的单词数量,展示了Flink处理实时数据流的能力。
Hadoop大数据平台构建、测试Job教学课件.pptx
当Job完成后,我们可以通过`hdfs dfs -ls /output`查看输出目录是否存在,然后使用`hdfs dfs -cat /output/part-r-00000`查看具体的结果。
半导体FAB高频英文术语实战指南:从报警信息到工艺配方
半导体制造高度依赖英文术语,设备界面、工艺配方与安全规范均以英文为底层协议。对于刚进入FAB的工程师,理解这些词汇是融入现场的第一步。从设备报警如VACUUM LEAK,到工艺动作如etch、deposition,再到质量指标如OEE、CPK,术语背后对应着具体的设备状态与工艺原理。将英文学习嵌入真实场景,通过Recipe理解参数组合,通过报警信息排查故障,既能提升沟通效率,也能减少因误读导致的异常。尤其“半导体安全”相关的LOTO、PPE等词汇关乎人身安全,必须烂熟于心;而OEE这类效率指标则是衡量设备综


