社区
Hadoop生态社区
帖子详情
Hive在执行select时出错
ss793904373
2017-07-29 07:40:43
我使用hive版本是0.13.1的,hadoop是2.5的,求助啊,各位大神!!!!
...全文
412
3
打赏
收藏
Hive在执行select时出错
我使用hive版本是0.13.1的,hadoop是2.5的,求助啊,各位大神!!!!
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
3 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
五哥
2018-07-25
打赏
举报
回复
应该是hive和hadoop不匹配吧 ?
官网查一下hive和hadoop对应的版本
tianfang
2017-07-31
打赏
举报
回复
schema不匹配,应该是字段名有错误
大数据之
Hive
详解
Hive
是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。是hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。本质是将HQL转化成MapReduce程序.本课程从基本概念,
hive
和mysql软件的安装入手,讲解
hive
的数据类型,DDL和DML操作,以及常用的查询和函数的使用,让你快速入门
hive
,即刻成为大数据程序员.
Hive
在
执行
插入数据等job任务
出错
1、完全分布式中
hive
的
执行
模式 参考博客 问题描述:
Hive
在
执行
job任务
时
候卡死并报出信息:Number of reduce tasks is set to 0 since there’s no reduce operator(翻译:由于没有减少操作符,减少任务数被设置为0),如图: 这样的情况下,
Hive
已经无法继续
执行
,只能退出重启
hive
(但是依然不能
执行
)。这是因为虽然输入文件很小,但是需要加载的文件很大,根本吃不消。 解决问题:
Hive
支持任务
执行
选择本地模式(local mode
时
间不同步问题导致
hive
只能
select
* 不能
select
count(*)
select
某个字段 ,是因
时
间不同步问题导致
hive
只能
select
* 不能
select
count(*)
select
某个字段 ,是因为
select
*不调用mr
select
单个字段或者count(*)调用mr
时
间不同步问题导致
hive
只能
select
* 不能
select
count(*)
select
某个字段 ,是因为
select
*不调用mr
select
单个字段或者count(*)调用mr
Hive
随笔
Hive
1、概述
hive
是建立在Hadoop基础上的数据仓库基础架构。可以将结构化数据文件映射成一张表,提供类sql查询功能(将hql转成MapReduce任务),对其中的数据进行分析和管理 2、
hive
的工作方式 将存放在
hive
中的数据映射成一张表,提供类sql语句的操作方式,
Hive
SQL实际上是先被SQL解析器解析成抽象语法树AST Tree,然后被
Hive
框架解析成一个MapReduce可
执行
的计划交给hadoop集群处理,结果也会输出在hdfs之中。(必须是结构化的数据)。在存储的
时
候hi
Hive
select
count(*)计数语句报错 FAILED: Execution Error, return code 2 from org.apache.hadoop.
hive
.ql.exe
@
Hive
select
count(*)计数语句报错 FAILED: Execution Error, return code 2 from org.apache.hadoop.
hive
.ql.exec.mr.MapRedTask 环境及报错现象 使用的hadoop是高可用集群。 自己写的MapReduce程序可以成功,但在
Hive
上
执行
select
count(*)报错 解决办法 原因:HA机制下yarn-site.xml配置不完整。 解决办法:在yarn-site.xml中添加如下配置,重启hado
Hadoop生态社区
20,811
社区成员
4,691
社区内容
发帖
与我相关
我的任务
Hadoop生态社区
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
复制链接
扫一扫
分享
社区描述
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章