hive、impala处理数据增量的问题

MarsXDM 2013-10-14 02:00:36
hive如何处理增量?文本文件格式的
增量包含新数据和修改数据,这边需要覆盖掉修改过的原来数据。
不知道各位是怎么做的?有没有好的方式?
...全文
401 4 打赏 收藏 转发到动态 举报
写回复
用AI写文章
4 条回复
切换为时间正序
请发表友善的回复…
发表回复
MarsXDM 2013-10-17
  • 打赏
  • 举报
回复
引用 3 楼 zhangkai08111 的回复:
full join可以把..
是的,已经用full join实验了。可以的。
  • 打赏
  • 举报
回复
full join可以把..
MarsXDM 2013-10-16
  • 打赏
  • 举报
回复
引用 1 楼 jxlhc09 的回复:
不能直接新增或修改,可以通过union all 的方式去做。
要覆盖掉以前的旧数据,union all能做到吗? full join可以么?
randee_luo 2013-10-15
  • 打赏
  • 举报
回复
不能直接新增或修改,可以通过union all 的方式去做。

20,808

社区成员

发帖
与我相关
我的任务
社区描述
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
  • 分布式计算/Hadoop社区
  • 涤生大数据
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧