然后有一个模板要显示最新的十条文章:SQL语句: select title from tables where status=1 order by time desc
当数据量变大的时候, 查询速度越来越慢, 请问这个可以怎么优化?
-
有一张文章表, 用 status (1- 正常 2-删除 ) 来表示文章是否删除.
然后有一个模板要显示最新的十条文章:SQL语句: select title from tables where status=1 order by time desc
当数据量变大的时候, 查询速度越来越慢, 请问这个可以怎么优化?展开阅读全文
-
等级
本版专家分：4 -
索引，或者查询缓存
-
等级
本版专家分：14366勋章
-
- 签到新秀 累计签到获取，不积跬步，无以至千里，继续坚持！
-
- 脉脉勋章 绑定脉脉第三方账户获得
-
-
select title from tables where status=1 order by time desc
limit 10
-
等级
本版专家分：25勋章
-
- 黄花 2018年6月 PHP大版内专家分月排行榜第二
-
-
status = 1 的时候会扫描全表吧
我想把所有删除的数据放在另一张表, 这样查询时不用status=1 会更快?
-
等级
本版专家分：3197勋章
-
-
黄花
2018年3月 Linux/Unix社区大版内专家分月排行榜第二
2002年6月 其他开发语言大版内专家分月排行榜第二
-
-
把时间比较久的数据移到历史表，或者把表分区，这样就可以在比较小的范围内搜索
-
等级
本版专家分：27673勋章
-
- 名人 年度总版至少三次排名前十即授予名人勋章
-
-
状元
2005年 总版技术专家分年内排行榜第一
2004年 总版技术专家分年内排行榜第一
-
-
进士
2006年 总版技术专家分年内排行榜第六
2003年 总版技术专家分年内排行榜第八
-
-
金牌
2005年6月 总版技术专家分月排行榜第一
2005年5月 总版技术专家分月排行榜第一
2005年4月 总版技术专家分月排行榜第一
2005年3月 总版技术专家分月排行榜第一
2005年2月 总版技术专家分月排行榜第一
2005年1月 总版技术专家分月排行榜第一
2004年12月 总版技术专家分月排行榜第一
2004年11月 总版技术专家分月排行榜第一
2004年10月 总版技术专家分月排行榜第一
2004年9月 总版技术专家分月排行榜第一
2004年8月 总版技术专家分月排行榜第一
2004年7月 总版技术专家分月排行榜第一
2004年6月 总版技术专家分月排行榜第一
2004年5月 总版技术专家分月排行榜第一
2004年4月 总版技术专家分月排行榜第一
2004年3月 总版技术专家分月排行榜第一
2004年1月 总版技术专家分月排行榜第一
2003年12月 总版技术专家分月排行榜第一
-
-
建立 status,time 上的复合索引
如果可以分区，则至少按 status 分区
-
等级
本版专家分：14366勋章
-
- 签到新秀 累计签到获取，不积跬步，无以至千里，继续坚持！
-
- 脉脉勋章 绑定脉脉第三方账户获得
-
-
没有索引可不就是全表扫描，加复合索引status ,time
-
等级
本版专家分：80
-
多少数据？千万以下建索引(time,status)，千万以上可以分表，不过看你这需求，limit 10的话，无所谓，分不分都行，反正只要有索引，会很快很快的
-
等级
本版专家分：5
-
建个历史表 把数据定期往历史表里折腾 保证表的数据在可控范围内 然后定期optimize表
-
等级
本版专家分：322 -
对status ,time做复合索引应该就够了，感觉没有必要做分区表。
-
等级
本版专家分：2
-
基本time上加索引就可用了，复合索引都不用加
- oracle千万级数据删除优化
删除千万百万级别表 delete from 表名nologging where Score_Date = to_date('2018-09-03','yyyy-mm-dd') nologging 不生成日志 ...删除数据，然后恢复主外键及索引。(备份的语句运行即可，美滋滋) ...
- mysql delete删除记录数据库空间不减少问题解决方法（优化表）
删除一个表的多条记录，发现delete之后数据库空间并没有减少，虽然数据记录数是零。 原来这是因为删除操作后在数据文件中留下碎片所致。DELETE只是将数据标识位删除，并没有整理数据文件，当插入新数据后，会再次...
- oracle大数据表（千万级）修改，删除优化技巧【转】
oracle大数据表（千万级）修改，删除优化技巧 运行下面的SQL delete from idwsq11.SH30_PRCSS_EXCTN_LOG e where deriv_prcss_time_stamp 省略其他信息。。。。。 为啥老外自己不做呢？ 其实冤枉他了，他删除...
- 记一次mysql删除大量数据的优化
最近工作中，遇到了要删除一些相关库的数据信息，涉及的数据有点多。 实际场景是这样的，公司的一个电商项目，电商为卖家准备了报表的相关数据，报表业务在实现时，将一些订单信息冷库备份到报表的库中，然后再在...
- MySQL删除大批量数据优化
每次删除记录，数据库都要相应地更新索引，查询MySQL官方手册得知删除数据的速度和创建的索引数量是成正比的；这是很慢的IO操作，而且后面索引碎片越来越多，就更慢，这就是为什么一开始只花1.5小时，后面要3小时...
- 重复数据删除(De-duplication)技术研究
De-duplication，即重复数据删除，它是一种目前主流且非常热门的存储技术，可对存储容量进行有效优化。它通过删除数据集中重复的数据，只保留其中一份，从而消除冗余数据。这种技术可以很大程度上减少对物理存储空间...
- MSSQL、MySQL 数据库删除大批量千万级百万级数据的优化
SQL Server上面删除1.6亿条记录，不能用Truncate（因为只是删除其中少部分数据）。经过实验，每次删除400万条要花1.5 - 3小时，而且是越到后面越慢，正常的话，需要大约102个小时，大约4天半时间。这在生产环境下是...
- MySQL 数据库删除大批量数据的优化
由于要求此表中的数据只保留当天的数据，所以每当在凌晨的某一时刻当其他程序处理万其中的数据后要删除该表中昨天以及以前的数据，使用delete删除表中的上百万条记录时，MySQL删除速度非常缓慢每一万条记录需要大概4...
- 删除大量Oracle数据方法总结
Oracle中删除超过50w条记录的数据，如果直接使用delete，效率就严重受到了影响。那么首先我们需要了解对于这个表的数据，我们到底是全部删除，还是部分删除。这里有三个关键字我们需要注意：truncate,delete,drop，...
- MySQL删除大量数据几种方案（续）
1.delete在执行中（删除大量数据），多数是一个或者多个范围条件，索引无法给与优化。执行中需要扫描索引和表内数据，最后还需要写入binlog，这对资源的消耗是非常大的。 2.本文方案在执行中，备份中使用了wher...
- Spark处理百亿规模数据优化实战
本优化是生产环境下用Spark处理百亿规模数据的一些优化实战，并成功将程序的速度提升一倍（涉及到敏感信息本文在2018-07-04号将其删除，阅读上可能显得不完整）下面介绍一些基本的优化手段 本文于2017-07-16号书写 ...
- 海量数据查询优化
今天下午去微软面试，被问到了海量数据查询优化的问题，由于平时开发的应用数据量比较小，不太关注性能优化的问题，所以不知如何作答，很是郁闷。从网上搜索出海量数据查询优化的两篇文章，转载下来，权当学习性能...
- Windows Server 2012重复数据删除增强
容量优化。 Windows Server 2012 中的...重复数据删除使用子文件可变大小分块和压缩，常规文件服务器的优化率为 2:1，而虚拟数据的优化率最高可达 20:1。伸缩性和性能。 Windows Server 2012 重复数据删除具有高度的
- 深入理解数据压缩与重复数据删除
数据压缩与重复数据删除两种技术有何区别与联系呢？实际中又该如何正确应用呢？笔者之前对数据压缩原理和技术没有研究，因此做了点功课，查阅整理了相关资料，并与重复数据删除技术进行对比分析。
- 重复数据删除技术概述
重复数据删除技术概述 一、 重复数据删除的分类 1. 源端重复数据删除和目标端重复数据删除 源端消重在数据源进行，传输的是已经消重后的数据，能够节省网络带宽，但会占用大量源端系统资源。 目标端消重发生在...
- opendedup(sdfs)源码分析1
opendedup简介opendedup也称为sdfs是一个重复数据删除开源项目，根据开发者Sam Silverberg的说法，"SDFS的设计目标是利用基于对象的文件系统的性能和可扩展性优点，通过重复数据删除优化存储。"结果 是："Opendedup/...
- 探究 | Elasticsearch如何物理删除给定期限的历史数据？
要删除历史数据，基础认知是：删除了给定条件的数据，用delete_by_query。 实际操作发现： - 删除文档后，磁盘空间并没有立即减少，反而增加了？ - 除了定时任务+delete_by_query，有没有更好的方式呢？ 2、...
- mybatis 批量删除数据
mybatis批量删除数据，将需要删除的数据id存放到list中，将list作为参数传递，具体代码如下: 1、在mapper层中创建deleteAudioAudioFiles(@Param(“ids”)List ids) 方法，返回删除的数据条数 package ...
- Oracle优化：大量数据插入或更新
面试官：现在有一张表数据量达很大，要把里面记录时间的那行更新到当前最新日期，每次更新都很卡，机器变慢影响业务，怎么优化。 我的想法是：大量的数据更新肯定会写记录，而大量的写记录又会触发lgwr,所以机器变卡...
- 面试常见问题--数据库优化 百万数据怎么优化
一、数据库访问优化的五个法则 在实际开发，我们主要是需要对SQL语句进行优化，我们需要快速定位能性的瓶颈点，也就是说快速找到我们SQL主要的开销在哪里？根据木桶原理可以知道，最慢的设备往往是性能瓶颈。...
- 数据的删除很慢，怎么办
工作中遇到这样一个问题，删除（delete）某张表的数据时，发现很慢。使用的数据库是oracle。差不多两分钟删除了10条。 分析了一下，主要是一下问题引起的。 1删除时有子查询 ... 3删除索引，把数据删除后重
- 【SQL Server性能优化】删除大量数据的方法比较
use master go if exists(select * from sys.databases where name = 'test') drop database test go --创建数据库 create database test if exists(select * from sys.tables where name = 't') ...
- DELETE大批量数据的性能优化
DELETE大批量数据的性能优化 问题的提出： 一个表有上千万的数据，欲从该表中删除部分数据； 在线用的生产库，不能影响生产； 该表有四个索引，删除的sql语句用到了索引； 正常业务不能停止－不能disable约束...
- MongoDB----数据结构---数据结构优化修改
在使用MongoDB开发的过程中，因为它的方便性，很多数据都使用了内嵌文档的形式保存。但是这样的结构在后期的开发过程中造成了很多问题。深刻的体会到了，MongoDB可以不设计集合的结构和数据类型即可使用，但不代表它...
- 关于MySQL百万级数据量查询的优化（PHP版）
最近在开发一个销售数据统计的网站时，客户提供的数据量在百万级以上，这些数据作为基础数据，从中提取，组合出各种类型的字段进行计算汇总，之前没有遇到过这么大的数据量。开始只是用最普通的方法来查询，当测试...
- mysql 200万数据查询优化
mysql 200万数据查询优化 最近在做java爬虫项目，用的mysql数据库，数据量少的时候没啥问题，但数据以上百万级别，某些查询巨慢。 比如 1.查询数据总数 select count(*) from tableName ; 我测试的极限是15...
- MySql+Mybatis+Druid 优化之MyBatis批量删除、更新
业务需求：一次更新/删除多条数据，通常有两种方式： （1）在业务代码中循环遍历，逐条删除，业务清晰 （2）在sql语句中，循环删除，只操作一次数据库，这个分为两种方式： 方式A：通过循环一个id列表，循环删除...
- Oracle 大数据量查询优化
前言:平常写的SQL可能主要以实现查询出结果为主,但如果数据量一大,就会突出SQL查询语句优化的性能独特之处.一般的数据库设计都会建索引查询,这样较全盘扫描查询的确快了不少.下面总结下SQL查询语句的几个优化效率的...