23,402
社区成员
发帖
与我相关
我的任务
分享请教有关搜索引擎的问题
如果要做一个搜索行业情报信息的搜索引擎，需要哪些技术？有哪些难点？投入资本有多大？周期有多久？比如服务器投入，人员投入，需要哪些人员？谢谢啊！
...全文
请发表友善的回复…
发表回复
stoneallen 2011-01-06
- 打赏
- 举报
搜索这块竞争挺激烈的
koj5201314 2010-12-31
- 打赏
- 举报
爬虫主要是搜集同行业的网站信息，企业、行业情报信息
amos1989 2010-12-31
- 打赏
- 举报
不懂。帮顶了。
zn85600301 2010-12-31
- 打赏
- 举报
[Quote=引用 4 楼 koj5201314 的回复:]
比如电力系统，那就说说要用写什么技术，比如一个蜘蛛程序。
[/Quote]
不太了解电力系统 有什么需要爬的
不过推荐下nutch 这个东西做爬虫挺不错的 而且支持分布式
还有解析HTML的工具 jsoup 这个工具也能直接当爬虫用 可以直接去爬网站
爬虫最主要的是考虑一个网页是否爬过 是否已经更新
搜索的交流的地方不多 你加些QQ群去问问吧
比如电力系统，那就说说要用写什么技术，比如一个蜘蛛程序。
[/Quote]
不太了解电力系统 有什么需要爬的
不过推荐下nutch 这个东西做爬虫挺不错的 而且支持分布式
还有解析HTML的工具 jsoup 这个工具也能直接当爬虫用 可以直接去爬网站
爬虫最主要的是考虑一个网页是否爬过 是否已经更新
搜索的交流的地方不多 你加些QQ群去问问吧
koj5201314 2010-12-30
- 打赏
- 举报
比如电力系统，那就说说要用写什么技术，比如一个蜘蛛程序。
zn85600301 2010-12-30
- 打赏
- 举报
你的行业情报指的是什么
搜索引擎要关注的东西多了 看项目大小和成本
搜索引擎要关注的东西多了 看项目大小和成本
koj5201314 2010-12-30
- 打赏
- 举报
额，，，你说的是java的？我上网查了查 好多C#的文章 晕死 不过都是同一篇
Jlins 2010-12-30
- 打赏
- 举报
lucene 或者 compass要会用...
要学会分词
要会用爬虫爬相关网站然后给 lucene或者compass数据
要学会分词
要会用爬虫爬相关网站然后给 lucene或者compass数据
