社区
Hadoop生态社区
帖子详情
hive 添加 分区 问题
Edwin603
2012-10-22 02:25:21
问题描述;
现在在hive里有一张表,表里的数据量是3亿条,表里有个字段为loginDate,字段记录的是 年月日 ,现在想给此表增加分区,分区的维度是 year,month,day。
请问 利用hive 如何操作可以实现我这个需求。查了书和网上资料,对于hive的分区都介绍的很简单,目前这个需求不知如何实现,请各位帮忙。
...全文
683
4
打赏
收藏
hive 添加 分区 问题
问题描述; 现在在hive里有一张表,表里的数据量是3亿条,表里有个字段为loginDate,字段记录的是 年月日 ,现在想给此表增加分区,分区的维度是 year,month,day。 请问 利用hive 如何操作可以实现我这个需求。查了书和网上资料,对于hive的分区都介绍的很简单,目前这个需求不知如何实现,请各位帮忙。
复制链接
扫一扫
分享
转发到动态
举报
AI
作业
写回复
配置赞助广告
用AI写文章
4 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
小爽昵称已被占用
2012-11-04
打赏
举报
回复
那你先按照loginDate这个字段把数据分配到不同的目录上,因为分区对应的就是存储目录,为了查询范围缩小,快速定位。 你现在数据都在一块,分区不分区没意义。 alter table add partition(y='',m='',d='')location'/x/x/xxx';
Edwin603
2012-10-23
打赏
举报
回复
没人会么?
Edwin603
2012-10-23
打赏
举报
回复
有人会么
Edwin603
2012-10-22
打赏
举报
回复
顶 有人能帮忙么
hive
创建
分区
表
hive
添加
分区
hive
删除
分区
创建外部
分区
表 create external table if not exists 表名 ( id int comment '唯一id', name string comment '姓名'...1.给表
添加
分区
alter table 表名 add if not exists partitions(dt='2021-11-11'); 2.
添加
.
【
Hive
-Partition】
Hive
添加
分区
及修改
分区
location
需要映射 HDFS 路径,数据落入到 HDFS 上时,我们在
Hive
中查询时会发现 HDFS中有数据,
Hive
没有数据,那是因为我们在 HDFS 上的数据还没有成功修复至
Hive
中,需要进行
分区
的修复(或者称之为
添加
分区
)
hive
添加
分区
字段
静态
分区
表: 一级
分区
表: CREATE TABLE order_created_partition ( orderNumber STRING , event_time STRING ) PARTITIONED BY (event_month string) ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t';
Hive
,
添加
分区
、删除
分区
、显示
分区
,msck修复
分区
往table1中新增c1,c2,c3,c4字段,跑完数据后,还需要刷
分区
(删除原来的
分区
,再
添加
分区
) --跑完数据后,没有刷
分区
的话,新的字段的数据查不到
hive
> select > c1 > ,c2 > ,c3 > ,c4 > ...
Hive
学习笔记(一):
Hive
分区
修改
文章目录什么是
Hive
的
分区
分区
意义
分区
技术
分区
方法和本质创建一级
分区
表创建二级
分区
表如何修改
Hive
的
分区
查看
分区
添加
分区
分区
名称修改修改
分区
路径删除
分区
分区
类别
hive
的严格模式笛卡尔积
分区
表没有
分区
字段过滤...
Hadoop生态社区
20,848
社区成员
4,696
社区内容
发帖
与我相关
我的任务
Hadoop生态社区
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
复制链接
扫一扫
分享
社区描述
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章