求大神指教关于:日志收集、实时分析 的好技术和经验

阿狸_A_桃子 2014-12-17 04:04:17
要求:日志收集,实时分析。将系统运行日志和业务日志做统一的整体规范。互联网的特性是能够动态的采集用户行为数据,如页面的点击次数,停留时间,操作频率等,可能根据从日志收集到的用户数据,获知功能需求和优先级。实现日志收集,实时分析。

请大神指点下高效便利的处理方案或者第三方插件!谢谢了!!
...全文
714 4 打赏 收藏 转发到动态 举报
写回复
用AI写文章
4 条回复
切换为时间正序
请发表友善的回复…
发表回复
超级大笨狼 2015-02-28
  • 打赏
  • 举报
回复
实时分析,成本就太高了,没实际意义,还是延迟分析比较划算。 主要思路是利用Job慢慢做,做好了通知你。
阿狸_A_桃子 2014-12-18
  • 打赏
  • 举报
回复
没大神回答啊
少主无翼 2014-12-17
  • 打赏
  • 举报
回复
关注下 也有这方面兴趣,但是不知道怎么搭建一个日志服务器,将所有系统的日志统一集中收集管理
阿狸_A_桃子 2014-12-17
  • 打赏
  • 举报
回复
有人推荐用 spark或者 kafka+storm,然后可以放到mongodb中通过mapreduce 统计 通过echairs来图形分析,但是后者有些复杂 ,并且这也是针对大数据而做的,如果数据量小了也就没必要了用这些了 服务器费用也是一部分

2,408

社区成员

发帖
与我相关
我的任务
社区描述
高性能计算
社区管理员
  • 高性能计算社区
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧