迅龙 0.6 提供模块一览表
迅龙0.6版提供了一下模块:
1 Web接入模块
应用接口,管理各个节点。
2 Web节点服务器
单个主题节点的Web服务器 + 检索器
3 文件系统
迅龙的文件系统采用了实时压缩的方法,把各个数据每3M(可调)作为一个单位存放。以url为KEY ,具备存储过程自动去重功能
4 蜘蛛
多线程蜘蛛,可定制的实时监控功能
5 自动模板系统
a 自动采样模块
从文件系统中识别出可以进行模板化的所有特征url
b 自动模板生成模块
自动处理自动采样的结果,自动生成模板
c 模板管理器
模板后期修正
6 分词和分词缓存模块
注意: 检索 和 索引 系统启动前 必须先启动 分词模块 和 分词缓存模块
具体请见 BIN
7 索引模块
建立索引
8 搜索前台
纯HTML + JS 的Web界面
迅龙0.6版由C#书写 运行于.NET 2.0 平台 基于LGPL协议 整体可用 如需其他授权 可以和作者联系(宁夏大学 张冬 zd4004@163.com)