求教SQL语句优化

2020-03-01 02:08:56 308 阅读 AI 写同款 · GEO 优化AI 选题数据监测一键分发 ›

Sql语句的优化以及Sql语句优化工具这周在做项目的时候，发现有些Sql语句写的复杂，一个复杂的Sql语句不仅性能比较低下，当涉及到重构的时候也是不容易理解和读懂的，并且一个复杂的sql语句会显著增加程序的耦合度，所以Sql语句的优化就显的很必要了。 Sql语句复杂化的原因首先列举一下Sql语句复杂化的原因: 将业务逻辑由Sql语句实现数据库表的设计不符合第三范式 Sql语句中含有大量冗余的不必要逻辑没有很好的利用视图如何优化Sql语句呢不要超过5个表以上的连接超过5张表以上的连接会大大增加sql引擎的消耗。考虑使用临阅读详情

千万行的表，快到亿了，使用 in 字句要崩溃啊，求优化方法。

表结构简述如下：
id，username，regtime，loginip，logindatetime

想要检索出登录10次以上的用户，现在用的语句是：
select * from table where username in (select username from table group by username having count(*)>10)

如果加上条件，要检索出某天登录10次以上、来自某几个IP的用户，更慢：
select * from table where username in (select username from table group by username having count(*)>10) and date(logindatetime)='2019-12-12' and loginip in('1,1,1,1','2.2.2.2','3.3.3.3')

折腾了半天，快崩溃了。。。求优化

...全文

【EPICS学习记录】根据官方教程创建一个IOC应用参照官网给出的IOC创建教程逐步操作完成了一个IOC应用的创建，官网教程中有部分过程表述的不清晰，自己摸索之后完成了IOC的创建，并把流程记录下来。其中有一些操作不是很理解，有问题或者建议欢迎指正。阅读详情

yalan

MySQL 57,062 成员 56,759 内容

+ 关注 + 加入社区

切换为时间正序

yalan 2020-03-02

打赏
举报

引用 6 楼 csdn_castiel 的回复:

select username from table where logindatetime='2019-12-12' and loginip in('1,1,1,1','2.2.2.2','3.3.3.3') group by username having count(*)>10 联合索引(logindatetime,loginip,username) logindatetime='2019-12-12'此处不要用时间函数，要用也放右边得到的username存入临时表tmp_table 最后 select * from tmp_table a join table b on a.username=b.username

感谢大家帮助，最后还是分表解决的

stonecutter 2020-03-02

打赏
举报

select username from table group by username having count(*)>10
此表肯定是全表扫描，要想快就是加大buffer_pool或者减少表的数据量（分表）。

ACMAIN_CHM 2020-03-01

打赏
举报

explain select * from table where username in (select username from table group by username having count(*)>10) and date(logindatetime)='2019-12-12' and loginip in('1,1,1,1','2.2.2.2','3.3.3.3') 结果贴出来分析一下。还有相关表的 show index 也贴出来。

csdn_castiel 2020-03-01

打赏
举报

select username from table where logindatetime='2019-12-12' and loginip in('1,1,1,1','2.2.2.2','3.3.3.3') group by username having count(*)>10 联合索引(logindatetime,loginip,username) logindatetime='2019-12-12'此处不要用时间函数，要用也放右边得到的username存入临时表tmp_table 最后 select * from tmp_table a join table b on a.username=b.username

yalan 2020-03-01

打赏
举报

引用 4 楼 liangtu 的回复:

登录时间上加索引，查询时用 >= '2020-03-01 00:00:00' and <'2020-03-02 00:00:00'

试了下基本没改善

我觉得效率低主要在 in 字句，尤其是加了检索条件后有两个 in 字句，效率更差啊

liangtu 2020-03-01

打赏
举报

登录时间上加索引，查询时用 >= '2020-03-01 00:00:00' and <'2020-03-02 00:00:00'

yalan 2020-03-01

打赏
举报

补充：每个月的登录次数就要几千万行了我想问在现有表的前提下如何优化查询呢？现在唯一能做的权限就是给表加个索引啥的，唉

yalan 2020-03-01

打赏
举报

登录表只有一张表，每个月自动生成一张表，比如201910 201911 201912。。。。不定啥时候需要查询用户，查询哪些天也不定，所以有点头疼表的结构就是我一楼的结构， id 主键 username key

liangtu 2020-03-01

打赏
举报

你这张表应该是登录日志表，有几个问题需要确认 1.是否所有记录都在一张表内，没有按照时间分表 2.建表语句、索引语句都贴出来 3.查询登录10次以上的用户，多久查询一次，一般查询哪些天的？

求教SQL语句优化

相关推荐