delphi读取EXCEL中数据写入数据库，如何加快速度？

[代斯Max]

delphi读取EXCEL中数据，20W条数据，写入mysql数据库。
在事务中，for循环，每隔1K条提交一次数据，完成时间约4分钟。
如果是40W条，时间就翻倍了。
请问如何优化下，能提高速度？谢谢

[lyhoo163]

1、读取EXCEL时，不用OLE模式，第三方控件比较快。 2、开辟多线程，分别读取数据。 3、提高硬件读取速度，好机器可加快速度。

[代斯Max]

引用 1 楼 lyhoo163 的回复:

1、读取EXCEL时，不用OLE模式，第三方控件比较快。 2、开辟多线程，分别读取数据。 3、提高硬件读取速度，好机器可加快速度。

现是使用StringList对象读取Excel，所有数据都在StringList对象中，这个瞬间就读取完了。 然后就是在事务中，循环这个StringList对象，循环取出数据，再每隔1K条提交一次数据。 整个流程是这样的。 有第三方控件的话，麻烦说明一下是哪个？谢谢

[秋天之落叶]

使用DBGridEh的SaveDBGridEhToExportFile几千条数据瞬间形成EXCEL，但是EXCEL导入数据库没有试过，也不知道DBGridEh有没有这个函数

[xiaocongzhi]

用数据流的方法最快，网上有教程的

[zhoufs]

先用手工方法，将Excel中的数据导入到SQL Server，再将数据从SQL Server读入到 MySQL 中

[flynetxu]

试试如下方法 insert into 你的表 SELECT * FROM OPENDATASOURCE('Microsoft.ACE.OLEDB.12.0', 'Data Source=你的EXCEl文件;Extended Properties=EXCEL 12.0')...[表名$]

[Frank.WU]

看看你提交过程？

[Frank.WU]

別分几次提交，整理好Excel为sql，用事务一次提交就好，我试了一下，24万多的数据提交给服务器，也就花了 68 秒。

[cate1019]

引用 8 楼 sailxia 的回复:

別分几次提交，整理好Excel为sql，用事务一次提交就好，我试了一下，24万多的数据提交给服务器，也就花了 68 秒。

你是用什么方式打开Excel的呢？能否分享一下代码？我也碰到速度慢的问题。

[秋天之落叶]

ado设置timeout=0后，20万条记录，39秒导入成功

[秋天之落叶]

哦，delphi版本XE10.2 ，sql server 2014，驱动ACE.OLEDB.12.0。
顺便问一下，如何修正查询超时的问题？

[秋天之落叶]

我刚才测试了一下，使用insert into...from openrowset （ACE.OLEDB.12.0）10万条记录用时18秒，速度不错。

但是，加到20万条记录，开始导入后30秒时提示查询超时，调整命令和连接的延时到120秒，均是在开始导入30秒时查询超时。

[日立奔腾浪潮微软松下联想]

可以先插入到TClientDataSet，再写回数据库表。

[lyhoo163]

大数据的导入，只要EXCEL的字段（列）设置准确，通过SQL Server Management Studio Express。
就可以直接导入，速度也快。

[boylafong]

保证列的正确，可以用sqlserver自己带的工具

[joanagle]

引用 14 楼 lyhoo163 的回复:

大数据的导入，只要EXCEL的字段（列）设置准确，通过SQL Server Management Studio Express。
就可以直接导入，速度也快。

你这种只适合03版的EXCEL，对07版以后的EXCEL不适用

[BlueStorm]