社区
Java
帖子详情
求java用sql查询方式读取csv的方法
justlearn
2013-10-23 11:02:55
需要像操作数据库一样读取csv文件中的数据,数据量是几十万条。
请问有谁用过比较好的开源包?比如csvjdbc之类的?
1.需要支持部分一致的查询(like)
2.最好能实现排序(order by)
另:csvjdbc现在支持部分查询吗?
...全文
399
4
打赏
收藏
求java用sql查询方式读取csv的方法
需要像操作数据库一样读取csv文件中的数据,数据量是几十万条。 请问有谁用过比较好的开源包?比如csvjdbc之类的? 1.需要支持部分一致的查询(like) 2.最好能实现排序(order by) 另:csvjdbc现在支持部分查询吗?
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
4 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
justlearn
2013-10-25
打赏
举报
回复
csvjdbc功能很强大,支持各种查询和排序。问题自己已解决。
justlearn
2013-10-23
打赏
举报
回复
引用 2 楼 forgetsam 的回复:
直接sqlloader导入或者作为外部表。
整个过程没有数据库,从csv中抽取数据,输出到excel
forgetsam
2013-10-23
打赏
举报
回复
直接sqlloader导入或者作为外部表。
tony4geek
2013-10-23
打赏
举报
回复
帮顶。sql 方式没用过,用第三方包直接读取过csv
spark从hdfs
读取
csv
数据后,通过spark
sql查询
,然后输出结果——这个过程中间干了啥?
本文详细剖析了Spark从HDFS
读取
CSV
数据,经
SQL查询
后输出结果的各步骤。包括初始化Spark环境,
读取
CSV
文件创建DataFrame,注册为临时视图,执行
SQL查询
(含解析、优化、生成物理计划等),最后输出查询结果,各步骤都有复杂内部机制。
java
读取
数据库数据写入
csv
这篇博客演示了如何使用
Java
从数据库中
读取
数据,并将其写入
CSV
文件。通过建立数据库连接,执行
SQL查询
,然后将查询结果转换为
CSV
格式,实现数据的导出。
flink
读取
csv
文件
本文介绍如何使用Apache Flink
读取
CSV
文件,通过Table API创建逻辑表,并运用SQL进行数据查询操作。具体步骤包括配置依赖、
读取
CSV
文件、创建逻辑表及执行
SQL查询
。
3. 使用
sql查询
csv
/json文件内容,还能关联查询?
文章介绍了使用Calcite支持对
CSV
和JSON文件进行
SQL查询
及关联查询。先说明了Calcite可适配文件系统数据源,给出Maven依赖,接着展示了
CSV
和JSON数据文件准备,最后给出核心代码,通过FileSchemaFactory指定文件目录和
读取
方式
,将文件
读取
成表。
使用Flink SQL
读取
大数据中的
CSV
文件
本文详细介绍了如何使用Apache Flink的SQL接口
读取
和处理大数据中的
CSV
文件,包括引入依赖、创建Flink表环境、
读取
CSV
文件、执行
SQL查询
以及处理查询结果的步骤,并提供了相应的源代码示例。
Java
51,408
社区成员
86,098
社区内容
发帖
与我相关
我的任务
Java
Java相关技术讨论
复制链接
扫一扫
分享
社区描述
Java相关技术讨论
java
spring boot
spring cloud
技术论坛(原bbs)
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章