社区
技术分享社区
帖子详情
董可伦
社区高层
大数据领域优质创作者
博客专家认证
2022-12-07 08:41:15
Spark SQL增量查询Hudi表
Hive增量查询Hudi表。最近可能会有Spark SQL增量查询Hudi表的需求,并且我发现目前用纯Spark SQL的形式还不能直接增量查询Hudi表,于是进行学习总结一下。本文总结了Spark SQL增量查询Hudi表的一些参数设置,并给出了示例,介绍了使用纯Spark SQL实现增量查询Hudi表的几种方式,不确定未来社区会采用哪种方式,大家目前如果有这种需求的话,可以先选择一种自己喜欢的方式,等未来社区版本支持后,再升级版本。
https://blog.csdn.net/dkl12/article/details/128125682
109
回复
打赏
收藏
Spark SQL增量查询Hudi表
Hive增量查询Hudi表。最近可能会有Spark SQL增量查询Hudi表的需求,并且我发现目前用纯Spark SQL的形式还不能直接增量查询Hudi表,于是进行学习总结一下。本文总结了Spark SQL增量查询Hudi表的一些参数设置,并给出了示例,介绍了使用纯Spark SQL实现增量查询Hudi表的几种方式,不确定未来社区会采用哪种方式,大家目前如果有这种需求的话,可以先选择一种自己喜欢的方式,等未来社区版本支持后,再升级版本。
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
技术分享社区
335
社区成员
83
社区内容
发帖
与我相关
我的任务
技术分享社区
致力于构建一个开放、活跃的技术分享平台,通过技术分享社区,开发者可以把自己的经历、知识分享给需要指引的同学,提高自我、收获肯定,快来加入我们吧!
复制链接
扫一扫
分享
社区描述
致力于构建一个开放、活跃的技术分享平台,通过技术分享社区,开发者可以把自己的经历、知识分享给需要指引的同学,提高自我、收获肯定,快来加入我们吧!
经验分享
个人社区
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章