100分请教一个导数据的问题,谢谢,谢谢,谢谢谢谢!

[82wds]

用分布编程,三万条数据,现在想从一个表导到另一个表中,怎么才能少量多次的导数据,我试过ClientDataSet是可以分批取数据的,但用GetNextPatch,结果是累加的,数据集最终占用了将近2GB的内存,机器基本没法用了?有没有什么办法可以分页取数据呢?一次取1000条,用完放掉,再取1000条.谢谢,谢谢,谢谢谢谢!

[ghy412]

用SQL语句实现

[82wds]

这位老兄,能给个例子吗?

[hqhhh]

转贴：

问：我想以一次5,000行的方式批量更新一个大型表，但我不知道怎样分割数据。该表不包含增量数字或整数主键。怎样才能在保持良好性能的同时实现数据更新呢？

答：如果知道哪些行尚未被更新，您可以使用简单的谓词来排除已更新的行，ROWCOUNT设置可以帮助您批量分割数据。以下的代码清单说明了如何使用该设置：

SET ROWCOUNT 1000
WHILE (1=1) BEGIN
BEGIN TRANSACTION
UPDATE...set ...,MyLastUpdate='date',...WHERE
MyLastUpdate < 'date'
-- 更新1000未更新行
IF @@ROWCOUNT = 0
BEGIN
COMMIT TRANSACTION
BREAK
END
COMMIT TRANSACTION
END

在指定的行数返回后，ROWCOUNT将使SQL Server停止查询处理。这项技术很有用，因为它避免了大量更新所致的并发命中；更新中的行数越少，更新任务使其他用户不能访问该数据的可能性就越小。结合事务日志备份，这一方法还可以使您的事务日志的大小降至最低。

如果没有识别已更新行的机制，您可以使用游标遍历所有数据并提交每个x值。但是，游标占用服务器资源的时间通常要多于基于集合的语句。

[hqhhh]

按上面的这种设置思想，分批的导数据

[cncharles]

看一下李维的关门数据库的一本书, 忘了叫什么名字,
里面有详细的说明的.

[82wds]

要求是要跨数据库的,可能不能用某些数据库特性,或者要针对各种数据库,定N份SQL语句呢?如果离开数据库这层,能做到吗?用ClientDataSet能做到吗?记得原来用ASP时,ADO有个ActivePage可以分页,用ClientDataSet可以吗?
还有,那本书是不是叫《分布式应用-系统篇》啊？

[82wds]

谢谢大家!

[dengyueguang]

up

[ttily77]

学习