java poi读取excel海量数据(数据大概有100万条，15列)

康_宝 2016-07-12 05:19:20

1.线程读取方式给个提示或者大数据读取方式给个提示。

有源码的，贴关键代码上来，谢谢各路大神。

...全文

1527 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

qq_35203897 2016-11-08

打赏
举报

回复

楼主解决了吗？求分享

由于项目需要对大量Excel数据进行输入输出处理，在使用JXL，POI后发现很容易出现OOM，最后在网上找到阿里的开源项目EasyExcel能很快速的读取写入超大Excel文件。经过大量的调试优化，现通过JAVA生成104万行20列的数据并写入到Excel文件的Sheet中只需要70秒的时间。

前言 POI读取Excel的方式用户模式：也就是poi下的usermodel有关包，它对用户友好，有统一的接口在ss包下，但是它是把整个文件读取到内存中的，对于大量数据很容易内存溢出，所以只能用来处理相对较小量的数据；事件模式：在poi下的eventusermodel包下，相对来说实现比较复杂，但是它处理速度快，占用内存少，可以用来处理海量的Excel数据。所以使用POI的用户模式去读取Excel大文件，会导致内存泄漏。读取大文件用事件模式。代码 pom <!-- POI，excel导入

在企业级应用开发中，Excel报表是一种最常见的报表需求，POI 是apache的子项目，目标是处理ole2对象。它提供了一组操纵Windows文档的Java API目前比较成熟的是HSSF接口，处理MS Excel（97-2002）对象。它不象我们仅仅是用csv生成的没有格式的可以由Excel转换的东西，而是真正的Excel对象，你可以控制一些属性如sheet,cell等Apache POI是Apache软件基金会的开放源码函式库，POI提供API给Java程序对Microsoft Office格式档案读和写的功能。结构：HSSF －提供读写Microsoft Excel格式档案的功能。XSSF －提供读写Microsoft Excel OOXML格式档案的功能。HWPF －提供读写Microsoft Word格式档案的功能。HSLF －提供读写Microsoft PowerPoint格式档案的功能。HDGF －提供读写Microsoft Visio格式档案的功能。

最近公司需求解析excel，一开始使用poi做的挺好的，后来直接上了几十万条数据的excel文件，内存直接溢出了，网上查到apache poi还提供了专门处理海量数据的方法，使用sax解析，果然用了内存使用率下降，但是不能解析xls文件，只能解析xlsx文件，所以把工具简单封装了一下，如果是xls的用传统方式解析，如果是xlsx的大文件，用sax，这样灵活一定，详见md文件(建议前往github查...

Java POI 百万规模数据的导入和导出

67,514

社区成员

225,878

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章