社区
Web 开发
帖子详情
lucene处理大数据量查询效率非常差
stone_lee
2010-06-04 10:22:36
索引文件4.9G,数据790万,采用lucene查询,只有一个term条件,一个order条件,发现cpu占用很大,47%左右,我现在想如果没办法,就把数据全部htm静态化,大家有好建议吗?
...全文
408
10
打赏
收藏
lucene处理大数据量查询效率非常差
索引文件4.9G,数据790万,采用lucene查询,只有一个term条件,一个order条件,发现cpu占用很大,47%左右,我现在想如果没办法,就把数据全部htm静态化,大家有好建议吗?
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
10 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
xiaoqianglovehuahua
2010-07-05
打赏
举报
回复
肯定是你的程序问,我们公司的索引文件已经达到了10G,搜索速度仍然很快~
fei130634
2010-06-10
打赏
举报
回复
恩 确实 那个不好做
stone_lee
2010-06-10
打赏
举报
回复
dddddddddddddddddddddd
stone_lee
2010-06-07
打赏
举报
回复
我用mysql查询效率很高,不必要优化。反映时间在0.0×秒左右。不过,毕竟mysql支持并发不怎地,所有没有采用mysql。
我现在已经将所有页面全部htm化了,但想看看有没有高手,做过lucene大数据量的查询的。
呵,几个G应该不算大吧,sphinx处理一点都不吃亏的哦。有大数据量lucene查询有经验的吗?
bossdai
2010-06-07
打赏
举报
回复
你索引文件太大了吧 估计还是要看看mysql有没有优化的地方 mysql毕竟不能和oracle比啊 还是看看mysql数据优化的地方吧
stone_lee
2010-06-07
打赏
举报
回复
没人知道
不姓贾_请叫我甄先生
2010-06-05
打赏
举报
回复
lucene还没搞过耶。。
---
肯定有优化的地方
stone_lee
2010-06-05
打赏
举报
回复
我用mysql的查询效率比lucene既然高太多,mysql采用MYISAM引擎,790多万的数据按照index条件查询,order的时间反映在毫秒级,cpu占用3%左右,配置,3.6G内存,7200转硬盘,cpu,e5200,,为什么既然lucene这么慢。为撒?
Java技术栈
2010-06-05
打赏
举报
回复
期待高手,帮你顶上去
stone_lee
2010-06-05
打赏
举报
回复
顶顶顶顶
Lucene
实战讲解课程
Lucene
是apache软件基金会4 jakarta项目组的一个子项目,是一个开放源代码的全文检索引擎工具包,但它不是一个完整的全文检索引擎,而是一个全文检索引擎的架构,提供了完整的
查询
引擎和索引引擎,部分文本分析引擎...
Lucene
.net 高数据检索
量
时怎样显著提高查找
效率
(从无到有学习
Lucene
)
日常开发中,相信大家经常会用sql中的like关键词去检索数据库数据,同时我们也知道,like往往会进行全表扫描,当数据
量
越来越大的时候,我们会纠结于数据库的龟速查找,此时我们必须另寻蹊跷,这时
lucene
就可以...
lucene
查询
原理
lucene
查询
原理1.
lucene
数据模型2.
lucene
查询
过程3. SkipList哨兵数组skipDocdocDeltaBuffer
Lucene
中使用读取跳表SkipList的过程读取跳表SKipList文档号:23文档号:7004. 倒排合并
lucene
是一个基于java的全文...
关于sql全文检索与
lucene
效率
比较的摘要
关于sql全文检索与
lucene
效率
比较的摘要,以下仅为网络找到的
效率
意见,近期会对
效率
做出测试比较,再更新。 -----------------------------------------------------------------------------------------------...
Lucene
系列一:全文检索
Lucene
是一套用于全文检索和搜索的开放源代码程序库,由Apache软件基金会支持和提供。
Lucene
提供了一个简单却强大的应用程序接口,能够做全文索引和搜索,在Java开发环境里
Lucene
是一个成熟的免费开放源代码工具;就...
Web 开发
81,092
社区成员
341,716
社区内容
发帖
与我相关
我的任务
Web 开发
Java Web 开发
复制链接
扫一扫
分享
社区描述
Java Web 开发
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章