hadoop测试的时候停留在map0 % reduce 0%,why？

DevilMonee 2016-04-24 04:11:10

配置应该是对的，但是执行测试wordcount的时候就是一直停留在map 0% reduce 0%(如下图)

求救大神，初学者（勿喷）！

...全文

971 3 打赏收藏转发到动态举报

写回复

3 条回复

切换为时间正序

请发表友善的回复…

发表回复

SMALLl_White 2019-10-09

打赏
举报

回复 1

权限不够在虚拟机上运行hadoop fs -chmod -R 777 / 加权限

DevilMonee 2016-04-26

打赏
举报

回复

分配的是2G的内存，只是测试数据大概4个hello 某某

alinly 2016-04-26

打赏
举报

回复

看对应日志,内容, 可能内存不够, 或者数据量超大?

Hadoop Map-reduce Job Scheduler Resources Hadoop, Why? 数据太多了，需要能存储、快速分析Pb级数据集的系统单机的存储、IO、内存、CPU有限，需要可扩展的集群使用门槛低，数据分析是个庞杂的问题，MPI太复杂 ...

1.3 Why Is This Dierent? 1.4 What This Book Is Not 2 MapReduce Basics 2.1 Functional Programming Roots 2.2 Mappers and Reducers 2.3 The Execution Framework 2.4 Partitioners and Combiners 2.5 The ...

1. Introduction: Why Look Beyond Hadoop Map-Reduce?.........................................14 Hadoop Suitability..........................................................................................

原文地址：...关键点： hadoop在map后会做shuffle、sort处理数据结构，然后交给reducer计算结果 ---------- Why is Map Reduce faster? -- A practical example

Why Map/Reduce?关键字: map/reduce mapreduce google system scalable 从Google在OSDI04上发表了Map/Reduce这篇Paper；到Yahoo！在06年雇佣Doug Cotting，投入对Hadoop最大的关注，以期提高其计算能力对抗Google；...

Hadoop生态社区

20,808

社区成员

4,690

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章