从大数据量文本文件中（10万条记录以上）读数据，插入ACCESS数据库表中，如何提高速度？

jansonwjl 2003-06-27 10:58:03

从大数据量文本文件中（10万条记录以上）读数据，文本文件中每行的长度是固定的，插入ACCESS数据库表，我采取的方式是按照规定好的格式逐条从文本文件中读取记录，截取文本记录使用ADOQUERY控件调用SQL语句插入表中不同的字段，但是这种方式在数据量很大，机器性能不是很好时，速度非常慢，大家帮忙提个建议不知采用什么方式能够提高速度这种读取数据插入数据库的方式，谢谢！

...全文

454 18 打赏收藏举报

写回复

用AI写文章

18 条回复

切换为时间正序

请发表友善的回复…

发表回复

jansonwjl 2003-07-05

打赏
举报

那到底怎样使用ADOQUERY的SQL命令方式提高从文本记录读出数据插库的速度呢

Delphi_Li 2003-06-30

打赏
举报

如果不想编程，那么使用SQL Server中的DTS，
如果想编程，那么使用Bulk Copy命令，具体使用方法参考SQL Server的联机帮助！

benny87 2003-06-30

打赏
举报

怎么会要这么长时间啊，我40多万条纪录做了没超过2分钟啊

jansonwjl 2003-06-30

打赏
举报

还是没有解决呢，大家再来想想办法，给提个好的建议吧，谢谢。

jansonwjl 2003-06-29

打赏
举报

还是没有找到好的办法，我在更新数据库时已经加入进度条显示了，但是几十万条数据，4-5小时的插数据操作让人很难接受呀。

wonderfulhfj 2003-06-29

打赏
举报

我顶住

jpyc 2003-06-29

打赏
举报

我也在寻求这个问题的解决方法，同命相连，帮你顶顶。

线索：我用sql语句执行，效率提高了一倍多，但数据量大，机器配置地肯定是最致命的问题。
如果这样，给你一个建议，可能对你有帮助：一旦需要处理这样的大数据量任务时，停止其它任务，显示进度条，给用户一种比较直观的处理数据的感觉，否则硬盘不停的转，屏幕什么反映都没有，用户会认为死机。另外，处理这种数据的时机尽量要放在系统不太忙的时候，如退出系统前。好，希望对你有帮助，如果解决了，给个消息！

jansonwjl 2003-06-28

打赏
举报

动态产生SQL语句每次更新一定量数据的方法该怎样做呢还请指教，谢谢

Hank 2003-06-27

打赏
举报

通过动态产生SQL语句来更新，每次更新一定数量例如100条！
直接独入牵扯到字段对应问题

DWGZ 2003-06-27

打赏
举报

少个扩展名嘛
如果你这文本格式式ADO 不认识的话。。。
就用文件操作吧

hkbarton 2003-06-27

打赏
举报

你的那个文本不在工程目录下

jansonwjl 2003-06-27

打赏
举报

to:WWWWA(aaaa)
您说的方法我试过了，不过运行到ADOCONNECTION.execute（）的时候报错提示
‘could not find file 'c:\programfiles\borland\delhi5\projects\text'不知为何？

lion_lh 2003-06-27

打赏
举报

先把数据库里的索引删了，再插入速度会快点

WWWWA 2003-06-27

打赏
举报

在Form上放一个ADOConnection,连结指向目标Access库
比如txt文件在c:\temp\aaaa.txt
就执行
ADOConnection.Connected := True;
ADOConnection.Execute('Select * Into abcd From [Text;Database=c:\temp].aaaa.txt');

outer2000 2003-06-27