[求助]Hive中RCFile格式数据导入

yyt_yang 2013-06-05 03:52:20
1、在hive建表是指定RCFile格式的表,不能直接load数据,只能通过textfile表进行insert,除此之外还有其他方式吗?
2、如果导入的文件格式为Txt类型,在外部先把txt转换成RCFile格式,可以直接导入吗,如果可以,希望能详细说一下,大家对于RCFile的优势都有所肯定,希望大家对于数据的导入也说说自己的想法。
...全文
2679 4 打赏 收藏 转发到动态 举报
写回复
用AI写文章
4 条回复
切换为时间正序
请发表友善的回复…
发表回复
jpjiang0102 2014-03-11
  • 打赏
  • 举报
回复
我也遇到了这个问题,看来没有什么高效的方法了,只能间接导入
yyt_yang 2013-06-06
  • 打赏
  • 举报
回复
看来大家都是这么干的啊,难道就没有考虑过导入的效率问题吗?
yyt_yang 2013-06-05
  • 打赏
  • 举报
回复
版主说的方式我知道,只是想看看有没有其他的办法,毕竟这种方式在数据导入上就需要耗费很长时间。
撸大湿 2013-06-05
  • 打赏
  • 举报
回复
1、先把TXT导Hive表tbtxt ,再执行
INSERT OVERWRITE table tb_RC SELECT * from tbtxt ;
2、据我所知,RCFile不能直接导入RC格式的Hive表

20,808

社区成员

发帖
与我相关
我的任务
社区描述
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
  • 分布式计算/Hadoop社区
  • 涤生大数据
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧