3.3w+
社区成员
查询大数据量结果集的性能优化
select * 操作
表规模在1000万条左右
怎样做能加快查询速度，减少查询时间
如果分次查询是不是能起到一定的效果
表规模在1000万条左右
怎样做能加快查询速度，减少查询时间
如果分次查询是不是能起到一定的效果
...全文
当前发帖距今超过3年，不再开放新的回复
发表回复
sljiang 2004-07-01
受益匪浅啊！
报表性能优化方案之数据集缓存与共享 对于大数据量报表，若每次直接从数据库中查询数据，不仅增加数据库服务器的压力，也极大的影响了取数的速度从而降低了报表的执行速度，为此FineReport提供了数据集缓存与共享功能。
Mysql千万级大数据量查询优化 1.对查询进行优化，应尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立索引。2.应尽量避免在 where 子句中对字段进行 null 值判断，否则将导致引擎放弃使用索引而进行全表扫描，如：select id from...
Oracle 大数据量查询优化 前言:平常写的SQL可能主要以实现查询出结果为主,但如果数据量一大,就会突出SQL查询语句优化的性能独特之处.一般的数据库设计都会建索引查询,这样较全盘扫描查询的确快了不少.下面总结下SQL查询语句的几个优化效率的...
Oracle 大量数据常见优化查询 1.对查询进行优化，应尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立索引。 2.应尽量避免在 where 子句中对字段进行 null 值判断，否则将导致引擎放弃使用索引而进行全表扫描，如： select id ...
大数据量下(批量)提升性能的方法以及常见的性能优化方法 数据库层面（包含数据库设计和语句）：尽量做到节省时间和数据库开销 1.让语句更加合理，符合查询优化的规则。...5.对于查询和插入数据库，大数据量时采用批量查询和插入，避免多次连接数据库增加数据库开销。 ...
MySQL 和 Oracle 大数据量分页查询方法及其优化 MySQL大数据量分页查询方法及其优化 ---方法1: 直接使用数据库提供的SQL语句 ---语句样式: MySQL中,可用如下方法: SELECT * FROM 表名称 LIMIT M,N ---适应场景: 适用于数据量较少的情况(元组百/千级) ---原因/缺点...
MySQL大数据量分页查询方法及其优化 ---方法1: 直接使用数据库提供的SQL语句 ---语句样式: MySQL中,可用如下方法: SELECT * ...---适应场景: 适用于数据量较少的情况(元组百/千级) ---原因/缺点: 全表扫描,速度会很慢 且 有的数据库结果集返回不稳定
mysql千万级数据量根据索引优化查询速度 索引通俗来讲就相当于书的目录，当我们根据条件查询的时候，没有索引，便需要全表扫描，数据量少还可以，一旦数据量超过百万甚至千万，一条查询sql执行往往需要几十秒甚至更多，5秒以上就已经让人难以忍受了。...
JAVA 集合框架优化之list.removeAll大数据量优化 数据量是两个集合的数据差不多都有60万，直接导致程序处于假死状态（程序当然是还在运行）； 出现问题始终要解决的，我又给程序修改为先用retainAll求交集，然后再removeAll的方式，效果不明显（事实是也假死了），...
数据量很大，分页查询很慢，怎么优化？ 当需要从数据库查询的表有上万条记录的时候，一次性查询所有结果会变得很慢，特别是随着数据量的增加特别明显，这时需要使用分页查询。对于数据库分页查询，也有很多种方法和优化的点。 下面简单说一下我知道的一些...
MySQL优化三：查询性能优化之查询优化器的局限性与提示 不过MySQL查询优化器只对少部分查询不适用，而且我们往往可以通过改写查询让MySQL高效的完成工作。 1 关联子查询 MySQL的子查询实现的非常糟糕。最糟糕的一类查询时where条件中包含in()的子查询语句。因为MySQL对...
针对大数据量的表的sql查询缓慢的优化方法 在开发过程中，我感觉最难受的不是让你去开发一个新的功能，而是去优化一个现有的功能，好多时候都是在优化查询速度，在这里整理总结了一些方法，可供借鉴： 一.因为sql的不规范而引起的引擎放弃使用索引从而进行...
MySQL-性能优化-索引和查询优化 要知道为什么使用索引，要知道如何去使用好索引，使自己的查询达到最优性能，需要先了解索引的数据结构和磁盘的存取原理参考博客:MySQL索引背后的数据结构及算法原理 如上这篇博客写的挺好，我就不再造轮子了，对...
数据库提高查询效率（较大数据）的优化方法 1. 数据库方面 1. 建立索引 2.分区（如MySQL，按时间分区） 3. 尽量使用固定长度字段和限制字段长度（如 ... 优势：1.... 2.... 3.... 2.... 1.... 2.... 3.... 1.优化sql语句，减少比较次数 2.限制返回条目数(mysql中使用limit）
存在汇总统计等功能的大数据量报表的优化方案 对于大数据量，多层分组的的汇总报表不能采用分页标签，可以采用如下的优化方案： 一、先初步对报表进行优化： 1、尽量在sql实现group分组，数据库虽然要进行分组运算，但是数据库中有索引，运算速度快，且 取到...
mysql千万级数据分页查询性能优化 1. 直接用limit start, ...当起始页较小时，查询没有性能问题，我们分别看下从10， 100， 1000， 10000开始分页的执行时间（每页取20条）， 如下： select * from product limit 10, 20 0.016秒 se...
