22,295
社区成员
发帖
与我相关
我的任务
分享第一次碰到ms sql 大数据量查询语句很慢，疑难问题，望高人解决.
前提： win2012 R2 + MS sql2008 R2，表名 yun_abc ，数据量 5000万。CPU/内存、硬盘负荷很小。
yun_abc 中有一个字段 yun_sysini， 为 bigint 类型，默认值为 1000000000000000000 ，并已建索引.
问题如下：
select top 1000 * from yun_abc with(nolock) where yun_sysini='1000000000000000090' ，执行很快，1s
select top 1000 * from yun_abc with(nolock) where yun_sysini='1000000000000000009' ，执行很慢，30s
select top 1000 * from yun_abc with(nolock) where SUBSTRING(convert(varchar(20),yun_sysini),18,2)='90' 执行很慢，30s
select top 1000 * from yun_abc with(nolock) where SUBSTRING(convert(varchar(20),yun_sysini),18,2)='00' ，执行很快,1s
实在搞不懂为什么，也不知道该怎么解决，我的要求就是想获得 后两位为“90”的记录。
当然了，前几位也有可能是 110.....开头或 101.... 开头.
不知道我说清楚了没，望高人解答！
yun_abc 中有一个字段 yun_sysini， 为 bigint 类型，默认值为 1000000000000000000 ，并已建索引.
问题如下：
select top 1000 * from yun_abc with(nolock) where yun_sysini='1000000000000000090' ，执行很快，1s
select top 1000 * from yun_abc with(nolock) where yun_sysini='1000000000000000009' ，执行很慢，30s
select top 1000 * from yun_abc with(nolock) where SUBSTRING(convert(varchar(20),yun_sysini),18,2)='90' 执行很慢，30s
select top 1000 * from yun_abc with(nolock) where SUBSTRING(convert(varchar(20),yun_sysini),18,2)='00' ，执行很快,1s
实在搞不懂为什么，也不知道该怎么解决，我的要求就是想获得 后两位为“90”的记录。
当然了，前几位也有可能是 110.....开头或 101.... 开头.
不知道我说清楚了没，望高人解答！
...全文
请发表友善的回复…
发表回复
ZCGEden 2021-07-30
- 打赏
- 举报
楼主问题解决了吗
xiaoxiangqing 2018-07-06
- 打赏
- 举报
要看返回的数据是否一样？数据不一样，可能执行计划不一样
sywcf 2018-07-06
- 打赏
- 举报
你这个问题.如果直接取这个字段,我是没想明白怎么整,楼上高人也都说了很多.我只是再提出一个解决这种问题的思路,楼主参考:
1.可以新建个字段,就只存储你的后几位数据, 建个作业,每天提前处理一次这个字段, 然后查询时取这个字段.
2.与这关系不大的.楼主用数值型的字段做条件查询时,
select top 1000 * from yun_abc with(nolock) where yun_sysini='1000000000000000090'
不要用单引号啊.虽然你加上单引号,语法不报错,但是这时你就把数值变成了字符型了啊..同等条件情况下,数值型的会比字符型的要快吧.这个是很多人不注意的细节
以上个人见解.
1.可以新建个字段,就只存储你的后几位数据, 建个作业,每天提前处理一次这个字段, 然后查询时取这个字段.
2.与这关系不大的.楼主用数值型的字段做条件查询时,
select top 1000 * from yun_abc with(nolock) where yun_sysini='1000000000000000090'
不要用单引号啊.虽然你加上单引号,语法不报错,但是这时你就把数值变成了字符型了啊..同等条件情况下,数值型的会比字符型的要快吧.这个是很多人不注意的细节
以上个人见解.
吉普赛的歌 2018-07-05
- 打赏
- 举报
我在 #2 的第2种方法就已经是这样了
jinsenhome 2018-07-04
- 打赏
- 举报
可以尝试新建一varchar列，该列的值是你yun_sysini列的字符串的反转，
建立索引
后续查询，使用 [该varchar字段] like '你要查的（末尾2或其他位）值字符串反转后形式%'
建立索引
后续查询，使用 [该varchar字段] like '你要查的（末尾2或其他位）值字符串反转后形式%'
吉普赛的歌 2018-07-04
- 打赏
- 举报
前一万位都没问题， 就是不要从后面取。
从前面取， 对应 sql 为 like 'xxx%'， 这种就是没问题的
从后面取， 对应 sql 为 like '%xxx', 这种就是有问题的
dengkeyu 2018-07-04
- 打赏
- 举报
字段已经有索引了， 但这个字段包装过， 用不了索引， 快不了的[/quote]
看什么情况，如果要查前2位，是可以用到索引的，后2位就么办法[/quote]
人家就是查后两位[/quote]
问问，为什么查前2位能用到索引？后2位就不行呢？
还有，如果是前3为或前4位呢？再或者是从前面数 第五位呢？
dengkeyu 2018-07-04
- 打赏
- 举报
字段已经有索引了， 但这个字段包装过， 用不了索引， 快不了的[/quote]
看什么情况，如果要查前2位，是可以用到索引的，后2位就么办法[/quote]
问问，为什么查前2位能用到索引？后2位就不行呢？
还有，如果是前3为或前4位呢？再或者是从前面数 第五位呢？
吉普赛的歌 2018-06-28
- 打赏
- 举报
字段已经有索引了， 但这个字段包装过， 用不了索引， 快不了的
丰云 2018-06-28
- 打赏
- 举报
理论上来说，直接给这个字段建个索引也行的，这类单一的查询，速度都会很快的
吉普赛的歌 2018-06-28
- 打赏
- 举报
必须是可持久化的列 PERSISTED
文盲老顾 2018-06-28
- 打赏
- 举报
计算列上还能创建索引？刚知道。。。。
吉普赛的歌 2018-06-28
- 打赏
- 举报
--1. 加计算列
ALTER TABLE yun_abc ADD right2 AS SUBSTRING(convert(varchar(30),yun_sysini),18,2) PERSISTED
--2. 计算列上创建索引
CREATE INDEX ix_yun_abc_right2 ON yun_abc(right2)
--如果不一定是后2位，可能是后3位，后4位，应该这样处理：
--1. 加计算列
ALTER TABLE yun_abc ADD reverseStr AS REVERSE(convert(varchar(30),yun_sysini)) PERSISTED
--2. 计算列上创建索引
CREATE INDEX ix_yun_abc_reverseStr ON yun_abc(reverseStr)
--3. 查询时这样处理
SELECT * FROM yun_abc WHERE reverseStr LIKE REVERSE('90')+'%'
吉普赛的歌 2018-06-28
- 打赏
- 举报
字段已经有索引了， 但这个字段包装过， 用不了索引， 快不了的[/quote]
看什么情况，如果要查前2位，是可以用到索引的，后2位就么办法[/quote]
人家就是查后两位
shinger126 2018-06-28
- 打赏
- 举报
字段已经有索引了， 但这个字段包装过， 用不了索引， 快不了的[/quote]
看什么情况，如果要查前2位，是可以用到索引的，后2位就么办法
卖水果的net 2018-06-27
- 打赏
- 举报
你这个情况，应该是数据分布不均匀，也没什么 好办法。
如果只是固定的查询前两位，可以考虑增加一个计算列。
如果只是固定的查询前两位，可以考虑增加一个计算列。
