Hive 的Map-Reduce Job执行太慢，有什么办法可以优化吗？

[blackkettle]

各位论坛达人，

我在虚拟机上安装了伪分布的hadoop 2.4.0, 然后安装好了hive 0.13.0.

然后新建了一个表，只有3行数据，如下所示

[admin@localhost Desktop]$ hive
14/06/01 20:03:18 WARN conf.HiveConf: DEPRECATED: hive.metastore.ds.retry.* no longer has any effect.  Use hive.hmshandler.retry.* instead

Logging initialized using configuration in file:/home/admin/apache-hive-0.13.0-bin/conf/hive-log4j.properties
hive> select * from wyp;
OK
1	wyp	25	13188888888888
2	test	30	13888888888888
3	zs	34	899314121
Time taken: 1.614 seconds, Fetched: 3 row(s)

可是一执行涉及到mapreduce的查询就慢得不行了。

hive> select count(1) from wyp;           
Total jobs = 1
Launching Job 1 out of 1
Number of reduce tasks determined at compile time: 1
In order to change the average load for a reducer (in bytes):
  set hive.exec.reducers.bytes.per.reducer=<number>
In order to limit the maximum number of reducers:
  set hive.exec.reducers.max=<number>
In order to set a constant number of reducers:
  set mapreduce.job.reduces=<number>
Starting Job = job_1401667640093_0009, Tracking URL = http://localhost:8088/proxy/application_1401667640093_0009/
Kill Command = /home/admin/hadoop-2.4.0/bin/hadoop job  -kill job_1401667640093_0009

已经等了10来分钟就没有出结果。

请问各位有什么好的建议吗？

万分感谢！

[herofour444]

看看日志。正常的不会这么慢1分钟左右就能出来。 并且现在hive效率确实很低 shark/spark效率能比hive提升几倍。

[coolbamboo2008]

关注，感觉不可能这么慢吧，是哪里有问题吧

[blackkettle]

嗯，确实是有问题。 直接重新安装hadoop。

[qq_25535783]

楼主，我现在也碰到了这个问题，困扰我一个多星期了，请问您是怎么解决的呢？万分感谢~在线等~