full join 执行非常慢

2012-06-19 04:28:43 767 阅读 AI 写同款 · GEO 优化AI 选题数据监测一键分发 ›

MySQL聚合查询、分组查询与联合查询实战指南：从入门到SQL优化在数据库开发中，SQL查询效率直接影响系统性能，尤其是面对大量数据时，聚合查询、分组查询与多表联合查询的灵活运用，往往是区分高效代码与低效循环的关键。聚合查询通过COUNT、SUM、AVG等函数完成统计缩行，分组查询依托GROUP BY实现分类汇总，而JOIN与UNION则解决跨表关联与数据合并问题。理解WHERE与HAVING的执行顺序、NULL值处理规则以及索引对JOIN性能的影响，能帮助开发者避免常见陷阱，写出兼具可读性与执行效率的SQL。从订单报表到用户分析，这些基础能力广泛支撑着业务场景的数据统计阅读详情

用left join 很快就可以出来查询的数据。
但是改成full join 就很慢。等个十几分钟都执行不完。不知道是数据库还是查询语句的问题。oracle的数据库。
希望大家能给点建议。

有必要的话我可以把查询语句贴出来。

...全文

Hive SQL之FULL JOIN优化记一次工作中SQL的FULL JOIN优化过程。阅读详情

litsand

Oracle 17,133 成员 55,258 内容

+ 关注 + 加入社区

切换为时间正序

大明湖畔_帅锅 2012-06-21

打赏
举报

只是A B 表的地区都是11的子集，不一定刚好有11地区都有。

可以以构造的所有地区为左表来关联数据不一定非要用full join 关联出来的大半数据都多余的没必要了..

litsand 2012-06-21

打赏
举报

[Quote=引用 10 楼的回复:]

或者 LZ列举下表结构举几条数据想要什么结果这样看起来直观一点可能没想象的那么复杂呢
[/Quote]

()A full join ()B on ...

因为A表单独查只有10条数据，B表也只有10条，然后 full join 就一直执行。。因为对这个不熟，就觉得这个不合逻辑，也没有其他的什么思路。就理解不了了。

但是（~~~~~~~） A ~~~~~~~执行可能要检索几十万数据吧。就是不知道可能的错误点会在哪里。

大明湖畔_帅锅 2012-06-21

打赏
举报

或者 LZ列举下表结构举几条数据想要什么结果这样看起来直观一点可能没想象的那么复杂呢

litsand 2012-06-21

打赏
举报

[Quote=引用 5 楼的回复:]

LZ指的少量是多少？ 1000？如果A、B表都算1000的数据 full join连接堆起来就是1000*1000的数据还会怎么快呢？
[/Quote]
单独查 AB 只有10条左右的数据了。对这个语法不是很了解，A 和 B 也不是我写的，只是为了方便想综合一下，不知道是不是嵌套太多，有歧义什么的，如果仅仅是10*10，应该没什么问题，而full join 换成left join，可以正确执行。我想达到的效果是是A表中对应地区的num加上B表中对应地区的num，不知道有什么好的办法。总共的地区一共有11个，只是A B 表的地区都是11的子集，不一定刚好有11地区都有。

select A.地区,A.num1,B.num2,(A.num1+B.num2) from (select 地区,count(*) as num1 from (select case when IP地址 between 184025089 and 184549375 then
省略。。。。。
else
'其他'
end 地区 from

(select d.serialnumber as 序列号,

省略。。。。'yyyy-mm-dd hh24:mi:ss') as 最后激活时间

from device d

left join devicepreconfig dp on d.serialnumber = dp.serial_number

where (dp.rgtype = 0 or dp.rgtype = 1) and d.deleted = 0

) tb ) group by 地区) A

left join

(select 地区,count(*) as num1 from (select case when IP地址 between 184025123 and 1845493455 then
省略。。。。。
else
'其他'
end 地区 from

(select d.serialnumber as 序列号,

省略。。。。'yyyy-mm-dd hh24:mi:ss') as 最后激活时间

from device d

left join devicepreconfig dp on d.serialnumber = dp.serial_number

where (dp.rgtype = 0 or dp.rgtype = 1) and d.deleted = 0

) tb ) group by 地区) B

on A.地区=B.地区

zhjj1234 2012-06-21

打赏
举报

笛卡尔积了，这样的数据有用吗

槑党--一缕风 2012-06-21

打赏
举报

可以先根据条件进行过滤然后再进行你需要的蛮连接查询

槑党--一缕风 2012-06-21

打赏
举报

full join 是满连接速度肯定要慢很多，数据越多越慢。
两个表都是10000条数据那么就是10000*10000

大明湖畔_帅锅 2012-06-21

打赏
举报

LZ指的少量是多少？ 1000？如果A、B表都算1000的数据 full join连接堆起来就是1000*1000的数据还会怎么快呢？

litsand 2012-06-21

打赏
举报

[Quote=引用 2 楼的回复:]

应该是，你的连接条件，致使大量出现了，一对多，多对一，这样的结果集了啊。
[/Quote]

非常感谢。我觉得也是很有这个可能，只是我查的表是这样子的（select *........) A full join (select *......) B 查出来的A 和 B 都是很少的数据量了。只是得到 A 和 B 的时候查询的数据量比较大。这个执行的时候是先查出来 A 和 B 然后 full join 匹配的话，按照我的理解不会很慢。

litsand 2012-06-21