mysql性能优化问题，数据量800w左右，做统计

Java > Java EE
收藏 回复
[问题点数：40分，结帖人wenjie4892543]
更多帖子
私信 空间 博客
wenjie4892543
本版专家分：2022
结帖率 98.68%


--查询耗时10.257s

ccp_browserrep 800w 数据
ccp_checkReport 8000条数据
ccp_policy 30条数据
ccp_device 90条数据
explain
 SELECT count(1) FROM ccp_browserrep tn , ccp_checkReport cr ,ccp_policy cp, ccp_device d
 where tn.reportId = cr.id and cr.policyId = cp.id and cr.deviceId = d.id 

想知道：统计可以使用其他方式，还是只能建索引
提供思路及方案都可以。3q

只看楼主 引用 举报 楼主 收起
展开阅读全文
更多帖子
私信 空间 博客
X元素
本版专家分：3340
这批数据 是做翻页操作？ 还是一次性全出？
只看TA 引用 举报 #1得分 0
更多帖子
私信 空间 博客
giya射手
本版专家分：583
Blank
GitHub 绑定GitHub第三方账户获取
建索引是必须的
只看TA 引用 举报 #2得分 0
更多帖子
私信 空间 博客
tianfang
本版专家分：30162
Blank
签到新秀 累计签到获取，不积跬步，无以至千里，继续坚持！
Blank
黄花 2020年5月 Java大版内专家分月排行榜第二
2020年4月 Java大版内专家分月排行榜第二
2017年11月 Java大版内专家分月排行榜第二
2017年9月 Java大版内专家分月排行榜第二
Blank
蓝花 2020年6月 Java大版内专家分月排行榜第三
2019年8月 Java大版内专家分月排行榜第三
2017年8月 Java大版内专家分月排行榜第三
2017年4月 Java大版内专家分月排行榜第三
2016年3月 Java大版内专家分月排行榜第三
索引+内存表
只看TA 引用 举报 #3得分 0
更多帖子
私信 空间 博客
树成
本版专家分：7846
碰到大量数据，要更改方案，首先建索引是必须的。
另外你需要另建一张表保存统计信息以方便查询，不能每次查询都做统计，统计过程尽量后台新启线程进行。
如果有更大数据，并且有实时效果，那就不能使用mysql直接做统计了。你需要大数据数据库+索引程序+集群环境来做了。
只看TA 引用 举报 #4得分 40
收起
收藏 回复
wenjie4892543

等级：

关注 私信 TA的帖子
MySQL性能优化及问题排查

常用命令 1.show variables查看系统变量 show variables 查看的是mysql系统变量，是...是MySQL服务器运行统计，如打开的表数量、命令计数、qcache计数等。 是系统状态 是动态 操作方式 1.慢查询 通过show variables ...

Mysql统计sql优化思路

-----日常记录一个解决自己在开发中遇到的sql统计查询慢的问题 建立字段索引 对数据冗多的副表，进行关联关系片区化（先对附表进行数据筛选再关联主表） 优化查询条件 1、字段索引的好处就不说了，各位都应该懂，...

MySQL单表数据量过千万，采坑优化记录，完美解决方案

使用阿里云rds for MySQL数据库（就是MySQL5.6版本），有个用户上网记录表6个月的数据量近2000万，保留最近一年的数据量达到4000万，查询速度极慢，日常卡死。严重影响业务。 问题前提：老系统，当时设计系统的人...

提高mysql千万级大数据SQL查询优化30条经验

1.对查询进行优化，应尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立索引。 2.应尽量避免在 where 子句中对字段进行 null 值判断，否则将导致引擎放弃使用索引而进行全表扫描，如：select ...

MYSQL性能优化系统整理

在实际开发过程中，深深感到MySQL的性能...当数据量达到千万级别甚至是上亿的数据量时，MySQL性能优化的技术就至关重要了。 有感于MySQL性能优化的重要性，我特别花了很多时间，系统性地梳理了MySQL性能优化的方...

MySQL的索引是什么？怎么优化？

MySQL在300万条记录左右性能开始逐渐下降，虽然官方文档说500~800w记录，所以大数据量建立索引是非常有必要的。MySQL提供了Explain，用于显示SQL执行的详细信息，可以进行索引的优化。 一、导致SQL执行慢的原因： ...

MySQL:explain(执行计划)详解

本文主要介绍了MySQL性能分析以及explain的使用，包括：组合索引、...MySQL在300万条记录左右性能开始逐渐下降，虽然官方文档说500~800w记录，所以大数据量建立索引是非常有必要的。MySQL提供了Explain，用于显示SQ...

MySQL 如何创建索引？怎么优化？

MySQL在300万条记录左右性能开始逐渐下降，虽然官方文档说500~800w记录，所以大数据量建立索引是非常有必要的。MySQL提供了Explain，用于显示SQL执行的详细信息，可以进行索引的优化。一、导致SQL执行慢的原因1.硬件...

索引与查询性能优化

今天在subway上看到一篇不错的关于mysql性能优化方面一篇文章，个人感觉，这是这几年看到的一篇把mysql索引优化说的最彻底的一篇文章。 索引（index）类似大学图书馆建书目索引，可以提高数据检索的效率，降低...

MySQL 的索引优化

MySQL在300万条记录左右性能开始逐渐下降，虽然官方文档说500~800w记录，所以大数据量建立索引是非常有必要的。MySQL提供了Explain，用于显示SQL执行的详细信息，可以进行索引的优化。 一、导致SQL执行慢的原因 1....

相关热词 c#设计思想 c#正则表达式 转换 c#form复制 c#写web c# 柱形图 c# wcf 服务库 c#应用程序管理器 c#数组如何赋值给数组 c#序列化应用目的博客园 c# 设置当前标注样式