社区
基础编程
帖子详情
50万的数据检索,速度慢死了
ykjsw
2003-12-02 01:31:59
前几天我把一个mp3搜索站的内容(象百度mp3那样的站,抓的只是mp3的地址,大小等等)全部抓到了本地,有50万,可是当我在本地搜索的时候,发现速度非常非常慢,比如说,我查询"张学友"的时候,用了10多秒,而且显示的很吃力,因为搜索是根据songname字段查询的,建立index好象没什么效果,请问还有别的方法吗?谢谢了
...全文
84
8
打赏
收藏
50万的数据检索,速度慢死了
前几天我把一个mp3搜索站的内容(象百度mp3那样的站,抓的只是mp3的地址,大小等等)全部抓到了本地,有50万,可是当我在本地搜索的时候,发现速度非常非常慢,比如说,我查询"张学友"的时候,用了10多秒,而且显示的很吃力,因为搜索是根据songname字段查询的,建立index好象没什么效果,请问还有别的方法吗?谢谢了
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
8 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
sandyde2
2003-12-02
打赏
举报
回复
index reverse..
ykjsw
2003-12-02
打赏
举报
回复
对了,我看有的论坛有200万的帖子,搜索起来很快啊,怎么回事?
sogoisogo
2003-12-02
打赏
举报
回复
全文检索一般需要一个建库过程。我这有一家公司的一些资料,网上也有。
一般都是C开发的检索引擎,效率较高。
haley_hj
2003-12-02
打赏
举报
回复
建议用全文索引
ykjsw
2003-12-02
打赏
举报
回复
to:gaobobo(a)
请问哪里有全文检索技术方面的资料,我的确是用like查询的:(
数据似乎不能再分类了,都是mp3,不知道再怎么分比较好,我想了很久也没想到
谢谢
sogoisogo
2003-12-02
打赏
举报
回复
还是看看全文检索技术的原理吧,特别是用like肯定是慢的。
可以把数据分类,然后按几张表查询,先确定大的范围,再确定小的范围。
ykjsw
2003-12-02
打赏
举报
回复
就简单的匹配啊,别跑题,谁知道呀
zaowei21
2003-12-02
打赏
举报
回复
怎么抓来的MP3地址告诉我好吧??
sqlite数据查询
速度慢
的可能原因
1.返回数据库字段信息与要查询数据库的数据字段不一致: 如下例:返回的字段少个IMGURL String where = String::format("%s='%s'", AppBean::APPID().string(), appid.string()); DbResolver* p = DbResolver::...
ES 8.x 向量检索性能测试 & 把向量检索性能提升100倍!
向量检索不仅在的跨模态检索场景中应用广泛,随着chat gpt的火热,es的向量检索,在Ai领域发挥着越来越...这里预告以下,在千
万
规模数据中做的测试,将检索性能提升了将近100倍。在本文中可以看看性能是如何被优化的。
MySQL-解决大量数据下慢查询问题
当需要从数据库查询的表有上
万
条记录的时候,一次性查询所有结果会变得很慢,特别是随着数据量的增加特别明显,这时需要使用分页查询。 对于数据库分页查询,也有很多种方法和优化的点。下面简单说一下我知道的.
mysql大规模
数据检索
优化
业务中遇到如下场景:每天有400W条左右的数据需要存储,随后使用的时候需要根据一批字段进行检索,且支持分类,其中包含普通字段的检索、模糊匹配、按时间范围检索, 需要支持三个月内的
数据检索
。 1.存储和检索...
DataTable
数据检索
的性能分析
我们知道在.NET平台上有很多种数据存储,检索解决方案-ADO.NET Entity Framework,ASP.NET Dynamic Data,XML, NHibernate,LINQ to SQL 等等,但是由于一些原因,如平台限制,比如说必须基于.NET Framework2.0及...
基础编程
21,886
社区成员
140,364
社区内容
发帖
与我相关
我的任务
基础编程
从PHP安装配置,PHP入门,PHP基础到PHP应用
复制链接
扫一扫
分享
社区描述
从PHP安装配置,PHP入门,PHP基础到PHP应用
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章