求每天千万数据量的插入或更新一张大表高效存储过程

[lffsonic]

1.已经写了一个视图，统计每天十几张基础表的增量数据。视图统计中有每个基础表的ID,排序视图中操作时间，按时间再根据ID更新或插入到总表中相应字段。
2.每天的十几张表的增量数据大概1K万左右。
3.每个基础表都有分区，而且根据视图查询每天字段做了函数索引，所以查询视图时间很快，排序等时间可以接受。
4.总表已经建立复合分区，有全局唯一索引。
5.刚开始写了一个存储过程，执行还可以，当总表数量达到6K万后执行时间很慢。
6.我写的存储过程是先把视图放入游标，遍历视图，判断总表中是否有重复记录，根据当前基础表ID，插入或更新总表的相应字段。
7.使用了nologging,和分批提交数据，性能没有根本改善。
8.考虑过使用把增量数据放入临时表中，然后使用marge into 批量更新，但是要根据基础表ID判断要更新字段，而且必须按时间排序操作。

请教各位大神，有什么好的思路。

[coolkisses]

越看越是不明白，这张视图只是统计，怎么又会涉及更新？

能否请说一下，要想做什么？

[hanks_gao]

在基础表上建Trigger，把插入或更新的时间分散开，可否满足要求？

[lffsonic]

[Quote=引用 2 楼 hanks_gao 的回复:]

在基础表上建Trigger，把插入或更新的时间分散开，可否满足要求？
[/Quote]

问题是要按视图统计基础表的操作时间排序后再进行插入或更新的

[ycproc]

如果真有这么大量的数据就分表吧

[lffsonic]

[Quote=引用 4 楼 fengyarongaa 的回复:]

如果真有这么大量的数据就分表吧
[/Quote]

可是分表，我要是更新数据呢，而且是大量数据，不可能扫描多个表然后更新

[DavideFiled]

用中间过程临时表吧，不建议用游标，尤其在大数据量情况下

[lffsonic]

[Quote=引用 7 楼 davidefiled 的回复:]

用中间过程临时表吧，不建议用游标，尤其在大数据量情况下
[/Quote]

其实游标性能对被人误解了，一般存储过程sql对会放入游标进行操作，只是PGA的游标区内存大小设置好，游标的性能还是很高，毕竟是内存操作

[lffsonic]

现在只是在PC上面跑，不知道到小型机服务器上面跑，性能提升多少