2个Oracle 数据之间数据的转换，当转换数据量比较大的时候的效率问题？

小酱油哇 2013-01-11 08:53:40

我用OracleDataReader 读取A数据库中的数据，当数据很多的时候发现好慢啊，如果把放在datatable 中，当数据很多（几十万条）的时候就会报错，请问大家在对大数据量的提取的时候有什么比较好的办法。我知道利用Oracle 的ODP 可以大量的添加和更新数据。现在就是提取很慢，求大神指点。
注释：为了方便管理，数据转换不使用oracle自带的导入导出工具。

...全文

126 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

linwaterbin 2013-01-11

打赏
举报

回复

PL/SQL DEVELOP

本课程以Oracle 10g数据库为基础,来讲解大事务的数据更改在数据库内部是如何处理的。当用户执行一条SQL对数据库进行更改操作的时候，我们知道数据是从磁盘读取到内存中进行更改操作的，那么当这个SQL执行时间很长，而且修改数据量非常大，由于内存容量大小的原因，可能在事务没有commit提交的情况下，一些脏数据已经写回到了磁盘中。那么在这种情况下，当用户执行commit提交操作，数据库是如何处理这些已经写到磁盘的脏数据块的？本课程就以实验的方式得出数据，来验证以上所提出的问题。

在日常工作中；经常会遇到这样的需求：Oracle 数据表跟文本或者文件格式进行交互；即将指定文件内容导入对应的 Oracle 数据表中；或者从 Oracle 数据表导出。其他数据库中的表跟Oracle数据库进行交互。若是少量数据；可选择的解决方案有很多。常用的用 Pl/SQL developer工具，或者手动转换为 INSERT 语句，或者通过API。但数据量大；用上面的方法效率太烂了。本文来说说...

Oracle数据用SQL语句转换数据字典（一个字段多个值）最近遇到一个让人非常头疼的问题，在开发过程中一个视图需要将字段的Code转换成数据字典中的Name,例：需要转换的字段格式：（code,code1,code2）转换成格式为：（name,name1,name2)字段以逗号分隔多个值，分享一下脱坑的过程。 1、首先想到得是这种数据用循环处理是最方便的，但是视图中不能用循环非常操蛋，然后想着写一个函数（FUNCTION）来循环处理这种数据,但是查了一下需要做的工作量很大，而且需要需要判断指定的cod

前言:平常写的SQL可能主要以实现查询出结果为主,但如果数据量一大,就会突出SQL查询语句优化的性能独特之处.一般的数据库设计都会建索引查询,这样较全盘扫描查询的确快了不少.下面总结下SQL查询语句的几个优化效率的地方,经验有限,难免有不足. 1.对查询进行优化，应尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立索引 2.避免在索引列上使用NOT在 where

隐式类型转换简介通常ORACLE数据库存在显式类型转换（Explicit Datatype Conversion）和隐式类型转换（Implicit Datatype Conversion）两种类型转换方式。如果进行比较或运算的两个值的数据类型不同时（源数据的类型与目标数据的类型），而且此时又没有转换函数时，那么ORACLE必须将其中一个值进行类型转换，使其能够运算。这就是所谓的隐式类型转换。其中隐式类型转换是自动进行的，当然，只有在这种转换是有意义的时候，才会自动进行。 Data C...

17,086

社区成员

55,238

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章