如何提高GROUP BY分组查询效率

2013-09-03 09:21:29 1.3万阅读 AI 写同款 · GEO 优化AI 选题数据监测一键分发 ›

GD32F103入门实践（一）配置环境，搭建工程模板，烧写程序写在前面本系列博客是我初学GD32F103的操作实录，我个人是个小白，在学习过程中真的也遇到了不少坑，因此我希望能记录下来，帮助到同样踩坑的你。我的芯片是GD32F103ZE，软件是Keil，烧写用的是JLink。材料准备首先我在兆易创新官网（兆易创新），下载相关的文件。点击资料下载，在搜索框里输入“GD32F10”可以得到相关的资料，其他芯片类似。比较重要的是GD32F10x AddOn和GD32F10x Firmware Library（固件库），这两个必须下载。下载Keil MDK5，这阅读详情

最近工作中遇到一个性能问题，自己搞了好久还是没搞定，拿到论坛上来，希望各位大虾给点意见。
查询的SQL如下：
SELECT A,B,C,D,COUNT(1) FROM T WHERE C=@C AND D IN (@D) GROUP BY A,B
因为数据量比较大，所以这条SQL效率就变得特别慢，而且这个是用在页面查询上的，分页后每次查询都要花到8到9秒钟，页面卡死在那边，希望高手们帮小弟解答，小弟这边先谢过了。

...全文

HDR视频技术之七：逆色调映射 HDR 技术说是继 4K 之后视频领域的又一次重大技术突破，不仅提高图像的动态范围，同时也提供了更宽的色域，并提升了画面在高光和暗部的细节信息，带给观看者更加真实的视觉体验。但作为 HDR 产业链的核心，内容短缺的问题仍然是 HDR 普及和成熟的重要限制因素。众多电视厂商将 HDR 技术作为其产品规划中的重要技术，主要是在硬件方面进行提升。而由于 HDR 内容制作对于设备要求较高，对采集、调色、显示等多方面都需要较高的质量要求，内容制作的复杂度和周期长等因素，导致了 HDR 内容的匮乏。阅读详情

uging

Web 开发 81,108 成员 341,721 内容

+ 关注 + 加入社区

切换为时间正序

uging 2013-09-04

打赏
举报

引用 15 楼 rainbowsix 的回复:

[quote=引用 13 楼 uging 的回复:] [quote=引用 11 楼 rainbowsix 的回复:] [quote=引用 10 楼 uging 的回复:] [quote=引用 6 楼 uging 的回复:] [quote=引用 3 楼 lrbyantai 的回复:] 针对此SQL语句，可在C、D字段建索引，A、B建组合索引

这个我已经试过了，加索引效果甚微，查询效果还是一样的慢。[/quote] 贴上SQL

SELECT
  DEALER_ID,
  DEALER_BUSCODE,
  DEALER_NAME,
  DEALER_STATUS,
  OFFER_ID,
  OFFER_NAME,
  CHANNEL_ID,
  SUB_CHANNEL_ID,
  DISTY_ID,
  DISTY_BUSCODE,
  DISTY_NAME,
  REGION_CODE,
  REGION_NAME,
  O_ACTIVATION_TIME,
  P_ACTIVATION_TIME,
  ACTIVATION_DATE,
  STATE_CODE,
  STATE_NAME,
  PACKAGE_ID,
  PACKAGE_NAME,
  SALES_PIC,
  MSISDN,
  COUNT(1)
FROM UM2_ACTI_DTL_201305
WHERE OFFER_TYPE IN(1,3)
    AND ACTIVATION_TYPE = 3
    AND OFFER_ID IN(20000001,20000031,20010010)
    AND PACKAGE_ID IN(322,197,326,566,318,576,277,374,377,581)
    AND CHANNEL_ID IN(1,2,4)
    GROUP BY DEALER_ID,PACKAGE_ID,ACTIVATION_DATE

[/quote] OFFER_ID CHANNEL_ID 有建索引的话试下这样：像这样内容不多的in你用 = 试试看，如果不行我也没办法了额，不了解业务，也不知道应用场景，不好说。另：你这查询返回多少数据？[/quote] in语句的地方用=我也试过，没什么效果。该查询返回的数据在17w左右[/quote] 17W 的话，慢是正常的，不慢反而不正常了哦～～

[/quote] 谢谢，晚上我自己搞了一下，结果出来了

SELECT  DEALER_ID,  DEALER_BUSCODE,  DEALER_NAME,  DEALER_STATUS,  OFFER_ID,  OFFER_NAME,  CHANNEL_ID,  SUB_CHANNEL_ID,  DISTY_ID,  DISTY_BUSCODE,  DISTY_NAME,  REGION_CODE,  REGION_NAME,  O_ACTIVATION_TIME,  P_ACTIVATION_TIME,  ACTIVATION_DATE,  STATE_CODE,  STATE_NAME,  PACKAGE_ID,  PACKAGE_NAME,  SALES_PIC,  MSISDN,  COUNT(distinct DEALER_ID,PACKAGE_ID,ACTIVATION_DATE),count(*) FROM UM2_ACTI_DTL_201305WHERE OFFER_TYPE IN(1,3)    AND ACTIVATION_TYPE = 3    AND OFFER_ID IN(20000001,20000031,20010010)    AND PACKAGE_ID IN(322,197,326,566,318,576,277,374,377,581)    AND CHANNEL_ID IN(1,2,4)    GROUP BY DEALER_ID,PACKAGE_ID,ACTIVATION_DATE

这样效率就高了很多

蛋黄车 2013-09-04

打赏
举报

针对此SQL语句，可在C、D字段建索引，A、B建组合索引

不会消失的夜晚 2013-09-04

打赏
举报

你确定你这条语句能执行？？？不在聚集函数中的列，全部要出现在group by语句中，你现在的group by 中少了C,D两列，报错了吧

uging 2013-09-04

打赏
举报

自己先抢个沙发

无聊找乐 2013-09-04

打赏
举报

引用 13 楼 uging 的回复:

[quote=引用 11 楼 rainbowsix 的回复:] [quote=引用 10 楼 uging 的回复:] [quote=引用 6 楼 uging 的回复:] [quote=引用 3 楼 lrbyantai 的回复:] 针对此SQL语句，可在C、D字段建索引，A、B建组合索引

这个我已经试过了，加索引效果甚微，查询效果还是一样的慢。[/quote] 贴上SQL

SELECT
  DEALER_ID,
  DEALER_BUSCODE,
  DEALER_NAME,
  DEALER_STATUS,
  OFFER_ID,
  OFFER_NAME,
  CHANNEL_ID,
  SUB_CHANNEL_ID,
  DISTY_ID,
  DISTY_BUSCODE,
  DISTY_NAME,
  REGION_CODE,
  REGION_NAME,
  O_ACTIVATION_TIME,
  P_ACTIVATION_TIME,
  ACTIVATION_DATE,
  STATE_CODE,
  STATE_NAME,
  PACKAGE_ID,
  PACKAGE_NAME,
  SALES_PIC,
  MSISDN,
  COUNT(1)
FROM UM2_ACTI_DTL_201305
WHERE OFFER_TYPE IN(1,3)
    AND ACTIVATION_TYPE = 3
    AND OFFER_ID IN(20000001,20000031,20010010)
    AND PACKAGE_ID IN(322,197,326,566,318,576,277,374,377,581)
    AND CHANNEL_ID IN(1,2,4)
    GROUP BY DEALER_ID,PACKAGE_ID,ACTIVATION_DATE

uging 2013-09-04

打赏
举报

引用 12 楼 bayougeng 的回复:

你group by这么多字段……要我是数据库我也想不出来怎么能让你快

这个没办法啊，客户需要这么分组

uging 2013-09-04

打赏
举报

引用 11 楼 rainbowsix 的回复:

[quote=引用 10 楼 uging 的回复:] [quote=引用 6 楼 uging 的回复:] [quote=引用 3 楼 lrbyantai 的回复:] 针对此SQL语句，可在C、D字段建索引，A、B建组合索引

这个我已经试过了，加索引效果甚微，查询效果还是一样的慢。[/quote] 贴上SQL

SELECT
  DEALER_ID,
  DEALER_BUSCODE,
  DEALER_NAME,
  DEALER_STATUS,
  OFFER_ID,
  OFFER_NAME,
  CHANNEL_ID,
  SUB_CHANNEL_ID,
  DISTY_ID,
  DISTY_BUSCODE,
  DISTY_NAME,
  REGION_CODE,
  REGION_NAME,
  O_ACTIVATION_TIME,
  P_ACTIVATION_TIME,
  ACTIVATION_DATE,
  STATE_CODE,
  STATE_NAME,
  PACKAGE_ID,
  PACKAGE_NAME,
  SALES_PIC,
  MSISDN,
  COUNT(1)
FROM UM2_ACTI_DTL_201305
WHERE OFFER_TYPE IN(1,3)
    AND ACTIVATION_TYPE = 3
    AND OFFER_ID IN(20000001,20000031,20010010)
    AND PACKAGE_ID IN(322,197,326,566,318,576,277,374,377,581)
    AND CHANNEL_ID IN(1,2,4)
    GROUP BY DEALER_ID,PACKAGE_ID,ACTIVATION_DATE

[/quote] OFFER_ID CHANNEL_ID 有建索引的话试下这样：像这样内容不多的in你用 = 试试看，如果不行我也没办法了额，不了解业务，也不知道应用场景，不好说。另：你这查询返回多少数据？[/quote] in语句的地方用=我也试过，没什么效果。该查询返回的数据在17w左右

bayougeng 2013-09-04

打赏
举报

你group by这么多字段……要我是数据库我也想不出来怎么能让你快

无聊找乐 2013-09-04

打赏
举报

引用 10 楼 uging 的回复:

[quote=引用 6 楼 uging 的回复:] [quote=引用 3 楼 lrbyantai 的回复:] 针对此SQL语句，可在C、D字段建索引，A、B建组合索引

这个我已经试过了，加索引效果甚微，查询效果还是一样的慢。[/quote] 贴上SQL

SELECT
  DEALER_ID,
  DEALER_BUSCODE,
  DEALER_NAME,
  DEALER_STATUS,
  OFFER_ID,
  OFFER_NAME,
  CHANNEL_ID,
  SUB_CHANNEL_ID,
  DISTY_ID,
  DISTY_BUSCODE,
  DISTY_NAME,
  REGION_CODE,
  REGION_NAME,
  O_ACTIVATION_TIME,
  P_ACTIVATION_TIME,
  ACTIVATION_DATE,
  STATE_CODE,
  STATE_NAME,
  PACKAGE_ID,
  PACKAGE_NAME,
  SALES_PIC,
  MSISDN,
  COUNT(1)
FROM UM2_ACTI_DTL_201305
WHERE OFFER_TYPE IN(1,3)
    AND ACTIVATION_TYPE = 3
    AND OFFER_ID IN(20000001,20000031,20010010)
    AND PACKAGE_ID IN(322,197,326,566,318,576,277,374,377,581)
    AND CHANNEL_ID IN(1,2,4)
    GROUP BY DEALER_ID,PACKAGE_ID,ACTIVATION_DATE

[/quote] OFFER_ID CHANNEL_ID 有建索引的话试下这样：像这样内容不多的in你用 = 试试看，如果不行我也没办法了额，不了解业务，也不知道应用场景，不好说。另：你这查询返回多少数据？

uging 2013-09-04

打赏
举报

引用 6 楼 uging 的回复:

[quote=引用 3 楼 lrbyantai 的回复:] 针对此SQL语句，可在C、D字段建索引，A、B建组合索引

这个我已经试过了，加索引效果甚微，查询效果还是一样的慢。[/quote] 贴上SQL

SELECT
  DEALER_ID,
  DEALER_BUSCODE,
  DEALER_NAME,
  DEALER_STATUS,
  OFFER_ID,
  OFFER_NAME,
  CHANNEL_ID,
  SUB_CHANNEL_ID,
  DISTY_ID,
  DISTY_BUSCODE,
  DISTY_NAME,
  REGION_CODE,
  REGION_NAME,
  O_ACTIVATION_TIME,
  P_ACTIVATION_TIME,
  ACTIVATION_DATE,
  STATE_CODE,
  STATE_NAME,
  PACKAGE_ID,
  PACKAGE_NAME,
  SALES_PIC,
  MSISDN,
  COUNT(1)
FROM UM2_ACTI_DTL_201305
WHERE OFFER_TYPE IN(1,3)
    AND ACTIVATION_TYPE = 3
    AND OFFER_ID IN(20000001,20000031,20010010)
    AND PACKAGE_ID IN(322,197,326,566,318,576,277,374,377,581)
    AND CHANNEL_ID IN(1,2,4)
    GROUP BY DEALER_ID,PACKAGE_ID,ACTIVATION_DATE

uging 2013-09-04

打赏
举报

引用 8 楼 rainbowsix 的回复:

[quote=引用 7 楼 uging 的回复:] [quote=引用 4 楼 rainbowsix 的回复:] 建索引，然后尽可能的过滤掉不符合条件的数据，然后再分组

下面是实际用到的SQL，请帮我看一下，索引什么的已经加过了，没多大效果 SELECT DEALER_ID, DEALER_BUSCODE, DEALER_NAME, DEALER_STATUS, OFFER_ID, OFFER_NAME, CHANNEL_ID, SUB_CHANNEL_ID, DISTY_ID, DISTY_BUSCODE, DISTY_NAME, REGION_CODE, REGION_NAME, O_ACTIVATION_TIME, P_ACTIVATION_TIME, ACTIVATION_DATE, STATE_CODE, STATE_NAME, PACKAGE_ID, PACKAGE_NAME, SALES_PIC, MSISDN, COUNT(1) FROM UM2_ACTI_DTL_201305 WHERE OFFER_TYPE IN(1,3) AND ACTIVATION_TYPE = 3 AND OFFER_ID IN(20000001,20000031,20010010) AND PACKAGE_ID IN(322,197,326,566,318,576,277,374,377,581) AND CHANNEL_ID IN(1,2,4) GROUP BY DEALER_ID,PACKAGE_ID,ACTIVATION_DATE[/quote] 你这样的sql不能执行吧。除了group by的列，其它选择的列必须要有统计函数的吧，类似于sum，average之类的[/quote] 可以执行的，效率比较差

无聊找乐 2013-09-04

打赏
举报

引用 7 楼 uging 的回复:

[quote=引用 4 楼 rainbowsix 的回复:] 建索引，然后尽可能的过滤掉不符合条件的数据，然后再分组

uging 2013-09-04

打赏
举报

引用 4 楼 rainbowsix 的回复:

建索引，然后尽可能的过滤掉不符合条件的数据，然后再分组

uging 2013-09-04

打赏
举报

引用 3 楼 lrbyantai 的回复:

针对此SQL语句，可在C、D字段建索引，A、B建组合索引

这个我已经试过了，加索引效果甚微，查询效果还是一样的慢。

uging 2013-09-04

打赏
举报

引用 2 楼 xxhhbb1538 的回复:

你确定你这条语句能执行？？？不在聚集函数中的列，全部要出现在group by语句中，你现在的group by 中少了C,D两列，报错了吧

你说的对，我只是举个例子，实际的SQL比较复杂就没有贴出来。但是假设SQL是正确的该怎么优化呢？实际的需求是按几个字段分组，然后统计出分组中每条记录的条数，该怎么实现？

无聊找乐 2013-09-04

打赏
举报

建索引，然后尽可能的过滤掉不符合条件的数据，然后再分组

如何提高GROUP BY分组查询效率

相关推荐