高分求高人指点，lucene内存溢出检索过慢问题

[CSDW]

TopDocs topDocs = this.searchers.search(query, queryFilter, this.totalhits, sort);

因为要实现排序（升序降序），所以search出来的不是document的id而是整个文档，this.totalhits结果集过大的话会造成内存溢出的情况。

结果集可能过亿并需要排序分页 （没有数据库）

现有的做法是把所有结果集加载到内存缓存，通过缓存进行分页

求教各位有什么好的做法没？

[wxn_yxm]

自己做过，其实处理一下就可以了，提高一下性能

[安心逍遥]

http://85600367.iteye.com/admin/blogs/855535
顶这个。祝lz好运

[CSDW]

谢谢楼上四位的回答，
http://85600367.iteye.com/admin/blogs/855535这个实现了功能，但是我要考虑的是邮件体过大，比如一封邮件为30M，每次检索出来的邮件就算只有1w封（我们在存储的时候并没有将邮件体和附件分离），也会造成内存溢出的情况

[CSDW]

[Quote=引用 7 楼 wxn_yxm 的回复:]

自己做过，其实处理一下就可以了，提高一下性能
[/Quote]

你好，能说下具体实现思路吗？

[CSDW]

自己顶

[Bannings]

索引库是建立在内存中的吗？

[CSDW]

[Quote=引用 2 楼 zhangao0086 的回复:]

索引库是建立在内存中的吗？
[/Quote]
非常感谢你的回答，索引是每个月生成的，以文件形式存放的！是检索大量结果的时候造成的内存溢出

[zn85600301]

[Quote=引用楼主 chenqi1988126 的回复:]
TopDocs topDocs = this.searchers.search(query, queryFilter, this.totalhits, sort);

因为要实现排序（升序降序），所以search出来的不是document的id而是整个文档，this.totalhits结果集过大的话会造成内存溢出的情况。

结果集可能过亿并需要排序分页 （没有数据库）

现有的做法是把……
[/Quote]
这样不行吧
lucene是不直接支持 分页查询 但是你可以间接的去做
http://85600367.iteye.com/admin/blogs/855535这是我以前学习lucene时的一点经验 希望能帮到你

[zn85600301]

另外C S D N或者是ITEYE 搜索引擎这块交流都不怎么样 基本是发帖就沉底

要是你要做这方面的应用 还是找几个人多的QQ群 这样解决问题简单快速

[CSDW]

谢谢上面回答，自己再次顶！

[CSDW]

自己顶