2,760
社区成员
发帖
与我相关
我的任务
分享爬虫 采集的数据如何分析
刚接触爬虫，需求是使用爬虫采集数据（设置关键字），对采集的数据进行按地区、时间、类别统计。如何把采集到的数据分析处理。分析出是哪种类别的、什么时间发生的、发生地属于哪个县市区。数据存储到mysql。用java
...全文
请发表友善的回复…
发表回复
hellodcj 2015-06-25
- 打赏
- 举报
1.需要用爬虫程序获得想要分析的文本信息。
2.用分词工具对文本进行分词
3.对于时间、地区等分词工具是可以进行词性标注的
4.自动分类可以用lucence提供的高级功能，自动分类，建议看下《lucence in action》
