社区
Oracle 高级技术
帖子详情
请问如何提高数据导入效率?
wxl789
2011-04-13 09:36:25
现在dmp数据有11g,机器内存32g。按照以往导入的时间算,11g文件大概要用8--9个小时。请问该如何优化提高数据导入效率?谢谢!!!!
...全文
146
11
打赏
收藏
请问如何提高数据导入效率?
现在dmp数据有11g,机器内存32g。按照以往导入的时间算,11g文件大概要用8--9个小时。请问该如何优化提高数据导入效率?谢谢!!!!
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
11 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
wxl789
2012-07-15
打赏
举报
回复
多谢各位,结贴!
cowboyhn
2011-04-23
打赏
举报
回复
在10g以上版本,使用数据泵impdp是速度最快的,也要用数据泵expdp导出。
如7楼所说,在主机性能允许的情况下,分成多个进程同时导出和导入,而不是全库导。
还有一点就是把索引删除,导入后再建索引。
woaini635000
2011-04-19
打赏
举报
回复
可以考虑一下使用Load方式进行加载.
wxl789
2011-04-19
打赏
举报
回复
1、是10g的,但用impd时显示无法识别的命令
2、数据库是不归档的
3、是分开导的。。。
在solaris系统下,32g内存,这个效率一直没啥提高呢?
谢谢!
houxp666
2011-04-14
打赏
举报
回复
第一,如果你的数据库版本是oracle10g或11g,可使用impd(数据泵),这比imp快得多。
第二,导入的性能差,关键的问题在归档上。这个我测试过,影响至少一倍,在导入前,先将表空间置为nologging,导入之后在修改为logging
第三,将大表单独拿出来导入,同时有5个窗口导入,速度会成倍增加。
我的400g数据,使用我上面说的第二第三个办法,在IBM p550上3个小时就导入完成了。
huangdh12
2011-04-13
打赏
举报
回复
增大 large_pool 还有是 在exp的时候好像可以指定buffer的
wxl789
2011-04-13
打赏
举报
回复
怎样优化exp、imp的速度?
我们有一个数据大概是30G的数据库要迁移,想通过exp、imp来实现,但是做普通的导出要2个多小时,太慢了,有没有什么好的办法能提高导入倒出的速度。
我在网上查了下面的方法,但效果不是很明显,请各位帮忙想想办法,谢谢!
原贴也是在找优化方法。。
谢谢!!
Phoenix_99
2011-04-13
打赏
举报
回复
http://www.itpub.net/thread-1258332-1-1.html#
wxl789
2011-04-13
打赏
举报
回复
导入语句:
imp user/code@sid file=/test_backup/A_OriTable_data_Exp.dmp TABLES=(A_%) ignore=y log=/test_backup/A_OriTable_data_Exp-imp.log
谢谢!!
苹果城的肥瓜
2011-04-13
打赏
举报
回复
顶,我也想知道怎么方法
excel百万
数据
如何
导入
导出?
限制了用户的下载数量每次最多只能有四个人同时下载,并且控制每个用户最大的导出
数据
最多只能是20w,与此同时他们也是使用的JDBC分批
导入
,但是并没有手动控制事务。2、其次就是往DB里插入,怎么去插入这20w条
数据
...
大
数据
量的情况下怎么将
数据
导入
到oracle
数据
库?
前言:大
数据
量的情况下,
导入
csv文件内容到
数据
库会很慢,为了节省宝贵的测试时间,需要寻找工具来
提高
数据
导入
效率
,
效率
提高
工具:sqlload(可将上亿条
数据
,几分钟内全部
导入
到oracle
数据
库,
效率
非常高) ...
mysql source
导入
大
数据
量时
效率
提升的方法
下面提供一个mysql source
导入
大
数据
量时
效率
提升的方法,修改后可以实现百万级
数据
1分钟内
导入
(当然这也与很多外部因素有直接关系)。 修改mysql配置文件,找到 innodb_flush_log_at_trx_commit
jdbc连接Oracle/MySQL
数据
库进行批量
导入
操作,如何
提高
效率
???
使用JDBC连接Oracle
数据
库进行批量
数据
导入
的时候,特别是大批量
数据
连续插入(百万级或以上),如何
提高
效率
呢? 在JDBC编程接口中有两个方法特别值得注意: (1) void addBatch() throws SQLException ...
Sqlite大批量
导入
数据
提高
效率
的几种方式
因此我最近编写有关遥感
数据
处理的程序的时候,也将SQLite引入进来,以
提高
数据
的结构化程度,并且
提高
大
数据
的处理能力(SQLite最高支持2PB大小的
数据
)。但是最开始,我发现,直接使用SQL语句的插入
效率
简直低的...
Oracle 高级技术
3,491
社区成员
18,714
社区内容
发帖
与我相关
我的任务
Oracle 高级技术
Oracle 高级技术相关讨论专区
复制链接
扫一扫
分享
社区描述
Oracle 高级技术相关讨论专区
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章