导入30万数据的高效方法

jsyzwx 2003-08-26 10:32:02

将一个表中的30万数据导入另一表中的高效方法有哪些，请高手进来谈谈！

...全文

103 46 打赏收藏转发到动态举报

写回复

46 条回复

切换为时间正序

请发表友善的回复…

发表回复

cyh1898 2003-08-28

打赏
举报

回复

我想知道两个结构相同的A.db，B.db文件，如果要把B.db全部导入到A.db中，如何写命令啊？

zsy_good 2003-08-28

打赏
举报

回复

1秒钟3000条纪录,赛扬1G,256内存，5400专银盘
1分半可以搞定。使用sql server 的 DTS可以实现

jsyzwx 2003-08-28

打赏
举报

回复

看来没有结果了

Drate 2003-08-28

打赏
举报

回复

现在不是有专门的工具的吗？
如果是不同数据库之间的数据导入导出，用MS SQL SERVER的DTS就非常好用呀，几乎现有的数据库都能够导，如果在DTS的列表中没有这个数据库，则还可以通过ODBC来导数据
如果只是30万条记录的话，我在ORACLE中1分钟就导完了，用的是IMP 、EXP的命令
在 SQL SERVER中用DTS的话也就差不多是这样的了
如果是ACCESS的话，你直接拷贝文件，然后删除掉不必要的表，最后压缩一下数据库就可以了

zjy6631 2003-08-28

打赏
举报

回复

那要看你的表结构大不大，如果很大（有很多字段，每个字段又很长），那么导入记录就要费时。可以用存储过程导入数据。

fenglaile 2003-08-28

打赏
举报

回复

把sql写在存储过程中，可能要快些，

underwolf 2003-08-28

打赏
举报

回复

学习+学习=2学习

学习*学习=学习^2

^o^

fansnaf 2003-08-28

打赏
举报

回复

如果只是倒数据，而不做其他操作（如：
数据转换等），我的270000数据，
dbf------>sql server 只需要122秒

wjhs 2003-08-28

打赏
举报

回复

up

Delphi_Li 2003-08-28

打赏
举报

回复

区区30万条不是问题！！！

如果数据库是SQL Server，使用Bulk Copy命令！！！
如果数据库是Oracle，使用SQL Loader！！！
如果数据库是DB2，使用Load！！！

以上的命令执行都非常快，以Oracle为例，在PIII 1G 512MB的计算机上只需要37秒的时间。

如果不会使用以上的工具，那么使用微软提供的DTS！！！这是一个超级傻瓜式的数据导入导出工具，速度比上面的工具一般要慢3~5倍！！！

renbao1999 2003-08-28

打赏
举报

回复

试试batchMove这个控件

suny_2001 2003-08-28

打赏
举报

回复

用MIDAS也可以啊，ClientDataSet ，加线程，应该很快了。

jsyzwx 2003-08-28

打赏
举报

回复

用Tbatchmove控件,只是速度有些慢

jsyzwx 2003-08-27

打赏
举报

回复

为什么sql server 的dts导入就那么快,有人分析过他的方法没有?

sy_315 2003-08-27

打赏
举报

回复

我用berkeley数据库（级低级数据库）插值20w条还要30min左右

jsyzwx 2003-08-27

打赏
举报

回复

这是一个常遇到的问题,大家一起来讨论讨论

cmain83 2003-08-27

打赏
举报

回复

学习...

jsyzwx 2003-08-27

打赏
举报

回复

多提建议

DJ_KK 2003-08-27

打赏
举报

回复

UP

zjqyb 2003-08-27

打赏
举报

回复

搂主要有自信，自已写的程序为何达不到那种速度,分析一下access的文件结构
自己read and write

绝对有可能有质的飞跃

加载更多回复（26）

Java怎么实现几十万条数据插入(30万条数据插入仅需13秒)

在 PostgreSQL 数据库中导入大量数据，可根据数据来源和格式选择不同的方法。

在实际应用中，数据的导入与导出是使用Neo4j的重要环节。无论是初始数据加载、系统迁移还是数据备份，都需要高效可靠的数据传输机制。本章将详细介绍Neo4j中的各种数据导入与导出方法，帮助读者掌握不同场景下的最佳实践。将数据导入Neo4j是使用图数据库的第一步。根据数据量大小、来源格式和性能要求，可以选择不同的导入策略。对于小到中等规模的数据集（通常是数十万条记录以内），Neo4j的命令是一个简单而强大的选择。这是一个内置的Cypher命令，可以直接从CSV文件中读取数据并创建节点和关系。基本用法：的优点包

通过本文的介绍，我们了解了如何利用Spring Boot和EasyExcel实现高效的大数据量Excel导入功能。通过异步多线程处理，可以在短时间内完成对百万级数据的导入操作，显著提升了系统的性能和用户体验。在实际应用中，可以根据具体需求进一步优化和扩展，以满足不同场景下的数据处理需求。希望本文能够帮助到正在寻找Excel导入解决方案的开发者，也希望读者能够在实际项目中成功应用这些技术，提升自身的开发效率和项目的稳定性。😊🙏Java面试技巧Java面试八股文 - 掌握面试必备知识（目录篇）

最近业务方有一个需求，需要一次导入超过100万数据到系统数据库。可能大家首先会想，这么大的数据，干嘛通过程序去实现导入，为什么不直接通过SQL导入到数据库。一、为什么一定要在代码实现说说为什么不能通过SQL直接导入到数据库，而是通过程序实现：1. 首先，这个导入功能开始提供页面导入，只是开始业务方保证的一次只有<3W的数据导入；2. 其次，业务方导入的内容需要做校验，比如门店号，商品号等是否...

5,928

社区成员

262,931

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章