hive表删除分区数据

爱小天天 2017-01-17 02:01:20

这边有一个hive表，其中分区为“area”“year”“month”“day”’“hour”“ minute”六个分区
需要删除一些不用了的数据：用了ALTER TABLE meso DROP PARTITION (area='1' , year='2012');
提示分区不匹配，

[hadoop3:21000] > ALTER TABLE meso DROP PARTITION (area='1' , year='2012');

Query: alter TABLE meso DROP PARTITION (area='1' , year='2012')

ERROR: AnalysisException: Items in partition spec must exactly match the partition columns in the table definition: default.meso (2 vs 6)

好像是必须指定6个分区才可以，有没有什么其他的好方法去删除这些数据呢？

...全文

3365 2 打赏收藏转发到动态举报

写回复

2 条回复

切换为时间正序

请发表友善的回复…

发表回复

爱小天天 2017-02-08

打赏
举报

回复

引用 1 楼 txhsj 的回复:

我这边试了下是可以删除分区的。hive版本为apache hive2.1.0

我这边是有多个分区，删除的话必须是指定全部分区才可以删的，

txhsj 2017-01-24

打赏
举报

回复

我这边试了下是可以删除分区的。hive版本为apache hive2.1.0

Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。是hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。本质是将HQL转化成MapReduce程序.本课程从基本概念,hive和mysql软件的安装入手,讲解hive的数据类型,DDL和DML操作,以及常用的查询和函数的使用,让你快速入门hive,即刻成为大数据程序员.

hive 表删除部分数据不支持使用 Delete From table_name where ...语句 hive表删除数据要分为不同的粒度：table、partition、partition内

insert overwrite table t_finance_tax_bill partition (importdate='20220218') select bill_id , apply_emp_id , bill_type_name , apply_emp_name , reimbursement_name , bill_apply_date

hive删除数据、删除分区、删除库表 -- 删除库 drop database if exists db_name; -- 强制删除库 drop database if exists db_name cascade; -- 删除表 drop table if exists employee; -- 清空表 truncate table employee; -- 清空表，第二种方式 ...

在大数据处理中，Hive是一个常用的数据仓库和分析工具，它提供了类似于SQL的查询语言，用于在Hadoop集群上执行数据操作。在某些情况下，我们可能需要根据特定条件删除Hive表中的指定分区数据。首先，我们需要了解Hive表的分区概念。Hive表可以按照一个或多个列的值进行分区，这有助于提高查询性能并进行更有效的数据管理。在删除指定分区数据之前，我们需要确定表的分区列和条件。请注意，上述代码仅删除了指定分区中的数据，并不会删除整个分区。使用上述代码，如果在指定日期范围内存在分区，则会删除该分区及其数据。

Hadoop生态社区

20,808

社区成员

4,690

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章