社区
高性能计算
帖子详情
大量日志按照时间聚合计数应该用什么架构?
Darcy杨
2015-06-25 02:37:48
输入: Kafka,内容是nginx日志,毫秒级,来自多个nginx服务器,所以基本按照时间顺序,但不是严格有序
处理: 这里应该用什么技术???
输出: 文本,格式为 URL 时间(分钟单位) 访问次数
刚接触这方面的东西,完全没思路,求指点,拜谢~
...全文
433
1
打赏
收藏
大量日志按照时间聚合计数应该用什么架构?
输入: Kafka,内容是nginx日志,毫秒级,来自多个nginx服务器,所以基本按照时间顺序,但不是严格有序 处理: 这里应该用什么技术??? 输出: 文本,格式为 URL 时间(分钟单位) 访问次数 刚接触这方面的东西,完全没思路,求指点,拜谢~
复制链接
扫一扫
分享
转发到动态
举报
AI
作业
写回复
配置赞助广告
用AI写文章
1 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
Darcy杨
2015-06-25
打赏
举报
回复
补充,日志解析什么的完全不是问题,重点是用什么技术聚合,每分钟一个计数
elasticsearch-2.3.3
- Elasticsearch 常用于
日志
聚合
和分析,通过对服务器、应用或设备产生的
大量
日志
数据进行收集、解析和索引,帮助监控系统健康状况、发现异常、优化性能。 - Logstash 是 Elasticsearch 生态系统的一部分,用于...
SQL(oracle)教程(PPT版)
5. **
聚合
函数**:SUM、AVG、MAX、MIN和COUNT等用于对一组值进行计算,如求和、平均值、最大值、最小值和
计数
。 6. **子查询**:嵌套在其他查询中的查询称为子查询,可以用于比较、过滤或获取满足特定条件的数据。 ...
10Wqps评论中台,如何
架构
?B站是这么做的!!!
千万级数据,如何做系统
架构
?亿级数据,如何做系统
架构
?千万级流量,如何做系统
架构
?亿级流量,如何做做系统
架构
?高并发系统,如何
架构
?
记一次生产MongoDB
聚合
游标遍历
计数
导致CPU过高及解决方案
在项目前期,为了赶业务需求进度,保证系统先上线,赢取用户,提前占领市场份额,开发的...在本次业务场景中,给用户展示的数据需要进行对
聚合
查询,由于数据量大,还需要分页,需要分页的话,每次
聚合
查询都需要进行总
高性能计算
2,408
社区成员
1,025
社区内容
发帖
与我相关
我的任务
高性能计算
高性能计算
复制链接
扫一扫
分享
社区描述
高性能计算
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章