SQL千万级数据like速度-CSDN论坛

CSDN论坛 > MS-SQL Server > 基础类

SQL千万级数据like速度 [问题点数：40分，结帖人liulangdeyuyu]

一键查看最优答案

确认一键查看最优答案？

本功能为VIP专享，开通VIP获取答案速率将提升10倍哦！

取消

开通vip会员

⋅中文分词之语义匹配 ⋅SQL千万级数据like速度 ⋅百万级数据插入数据库 更多帖子 关注私信空间博客 liulangdeyuyu 本版专家分：0 结帖率 100%: 表中有几千万条数据

现在的需要是查询出列中包含某字段的所有数据

select * from table1 where lie1 like '%aa%'

但这样速度实在是太慢了.

有没有什么实用点的方法,比如说先查部分数据等

应该怎么实现?

0 2013-02-02 10:06:37

回复数 18 只看楼主引用举报楼主

⋅ 关于页面调用后台变量的问题 ⋅sqlce 怎么进行多库关联查询？？ ⋅Wince6.0下连接SQLCE数据库，怎么提高速度 更多帖子 关注私信空间博客 sundayzhao 本版专家分：320: select * from table1 where lie1 like '%aa%'

这样的写法无法提高速度应改为
select * from table1 where lie1 like 'aa%'

左含有可以利用索引，当然了，lie1这个字段要建立索引。

0 2013-02-02 10:17:33

只看TA 引用举报 #1 得分 0

⋅outlook2010插件无法识别webservice ⋅使用c#编写APP上传文件到sharepoint2013出错 ⋅使用c#编写APP上传文件到sharepoint2013出错 更多帖子 关注私信空间博客 starseeker7 本版专家分：5656: 这种不合理的写法肯定不行
既然都是千万级别了，就必须尽量避免这种肯定会导致扫描的情况
比如专门为aa增加一个字段，等办法

0 2013-02-02 10:20:28

只看TA 引用举报 #2 得分 0

⋅中文分词之语义匹配 ⋅SQL千万级数据like速度 ⋅百万级数据插入数据库 更多帖子 关注私信空间博客 liulangdeyuyu 本版专家分：0: 引用 1 楼 sundayzhao 的回复:
select * from table1 where lie1 like '%aa%'

这样的写法无法提高速度应改为
select * from table1 where lie1 like 'aa%'

左含有可以利用索引，当然了，lie1这个字段要建立索引。

这种查出来的不符合要求啊

比如:werweaawertwer,就查不出来

0 2013-02-02 10:37:21

只看TA 引用举报 #3 得分 0

⋅中文分词之语义匹配 ⋅SQL千万级数据like速度 ⋅百万级数据插入数据库 更多帖子 关注私信空间博客 liulangdeyuyu 本版专家分：0: 引用 2 楼 starseeker7 的回复:
这种不合理的写法肯定不行
既然都是千万级别了，就必须尽量避免这种肯定会导致扫描的情况
比如专门为aa增加一个字段，等办法

select * from table1 where lie1 like '%aa%'

中aa是不固定的,也可能是bb,cc等

就是想查lie1中包含某字段的数据信息

0 2013-02-02 10:38:51

只看TA 引用举报 #4 得分 0

⋅outlook2010插件无法识别webservice ⋅使用c#编写APP上传文件到sharepoint2013出错 ⋅使用c#编写APP上传文件到sharepoint2013出错 更多帖子 关注私信空间博客 starseeker7 本版专家分：5656: 。。。你这种需求在QW级别里显然就不科学了
若需求无法避免就只有走别的办法
1、切割表，根据业务划分把QW级别表切割为百万。可以根据时间/类型等方式
2、通过程序进行空间换时间，找个NB的服务器，把整个表的主键，lie1这两个字段存放在内存中，如此提高效能，用接口调用，对常见搜索字段，创建记录做主动缓存。

0 2013-02-02 10:54:49

只看TA 引用举报 #5 得分 0

⋅outlook2010插件无法识别webservice ⋅使用c#编写APP上传文件到sharepoint2013出错 ⋅使用c#编写APP上传文件到sharepoint2013出错 更多帖子 关注私信空间博客 starseeker7 本版专家分：5656: 还有个选择就是放弃MSSQL，采用NOSQL，，你就再也不用考虑表扫描的问题了

0 2013-02-02 10:56:16

只看TA 引用举报 #6 得分 0

⋅预想的pgsql最简说明/速览--有没有高手出来补充一下 ⋅sql server是如何使用同文件组里mdf/ndf的？ ⋅为网站里能下载的所有文件自动生成一个校验码 更多帖子 关注私信空间博客 haitao 本版专家分：12331 黄花 2013年12月 Delphi大版内专家分月排行榜第二 蓝花 2014年4月 Delphi大版内专家分月排行榜第三 2014年3月 Delphi大版内专家分月排行榜第三 2013年5月 Delphi大版内专家分月排行榜第三 2013年1月 Delphi大版内专家分月排行榜第三 2010年11月 Delphi大版内专家分月排行榜第三 2009年12月 Delphi大版内专家分月排行榜第三 2009年11月 Delphi大版内专家分月排行榜第三: 全文索引是干这个的
但是好像用好的也不多

0 2013-02-02 12:51:31

只看TA 引用举报 #7 得分 0

⋅急，高手帮忙！！！！！ ⋅msdb 数据库太大，如何清理出磁盘空间 ⋅datagridview 问题 更多帖子 关注私信空间博客 rfq 本版专家分：4926: 千万级的数据别用 sql 用 db2,oracle

做好从设计上改成分区表或者小表

0 2013-02-04 14:08:00

只看TA 引用举报 #8 得分 0

⋅还流行散分吗 ⋅CSDN的个人资料修改 ⋅新年好，散分 更多帖子 关注私信空间博客 昵称被占用了 本版专家分：107740 红花 2002年2月 MS-SQL Server大版内专家分月排行榜第一 2001年11月 MS-SQL Server大版内专家分月排行榜第一 黄花 2008年2月 MS-SQL Server大版内专家分月排行榜第二 2007年7月 MS-SQL Server大版内专家分月排行榜第二 2002年3月 MS-SQL Server大版内专家分月排行榜第二 2002年1月 MS-SQL Server大版内专家分月排行榜第二 2001年12月 MS-SQL Server大版内专家分月排行榜第二 蓝花 2013年2月 MS-SQL Server大版内专家分月排行榜第三: 考虑下使用全文检索，不过必须清楚，全文检索基于分词，与like 的结果不相同的

0 2013-02-04 14:21:21

只看TA 引用举报 #9 得分 0

Kilin_Zhang 本版专家分：182: 这么大的数据量，果断放弃like吧

0 2013-02-07 09:29:03

只看TA 引用举报 #10 得分 0

xiabanghu 本版专家分：77: 应该避免在select 里面使用*这个消耗query time

0 2013-02-07 13:07:11

只看TA 引用举报 #11 得分 0

sych888 本版专家分：1193 黄花 2016年12月 Oracle大版内专家分月排行榜第二 2016年11月 Oracle大版内专家分月排行榜第二 2016年10月 Oracle大版内专家分月排行榜第二 2013年7月 Oracle大版内专家分月排行榜第二 蓝花 2013年5月 Oracle大版内专家分月排行榜第三: 全文索引。。。。。。

0 2013-02-11 20:07:49

只看TA 引用举报 #12 得分 0

lkf181 本版专家分：24: 建索引呗！！！！！！！！

0 2013-02-16 22:02:12

只看TA 引用举报 #15 得分 0

qqqqqqqq_2013 本版专家分：85: 建索引，用charindex代替like

0 2013-02-17 09:33:47

只看TA 引用举报 #16 得分 0

chinarp 本版专家分：0: 全文检索是可以的吧

0 2013-02-17 09:48:13

只看TA 引用举报 #17 得分 0

收藏帖子