关于Flink的实时流处理的理解(小白求教)

MamyA 2020-10-22 09:53:10
最近有一个业务场景是关于动态数据预警监控的,采用定时任务监控效果不佳,感觉可以转Flink来实现,但是项目之前没有用到这块,所以有些场景原理还请各位大佬赐教。

业务场景是针对20个/5s的阈值做告警,使用定时任务会出现监控数据结果区间断层的问题(下图中的红色线区间)导致监控结果不满足告警条件而不会告警,而实现数据中确实有一段监控结果是满足告警条件的,但是这段数据跨定时任务的两个监控周期(下图中紫色线区间)。请问这种场景,如果我们切换到Flink实时监控的话,可以实现每秒对前5s周期内的数据进行汇集告警嘛?比如:1s-5s,2s-6s,3s-7s,4s-8s等等。

谢谢各位大佬指点。

...全文
11900 7 打赏 收藏 转发到动态 举报
写回复
用AI写文章
7 条回复
切换为时间正序
请发表友善的回复…
发表回复
我先森 2022-08-19
  • 打赏
  • 举报
回复

可以的,你可以在flink滑动窗口去根据状态, 根据状态去定义定时器即可。

hnmwykka 2021-12-15
  • 打赏
  • 举报
回复

img

MamyA 2021-07-13
  • 打赏
  • 举报
回复

大佬,你真好。虽然我已经在使用了。但是还是要感谢你的热心支持。。。

咕泡-星云 2021-07-12
  • 打赏
  • 举报
回复

可以使用flink的滑动窗口,可实现每隔多长时间获得最近多长时间的数据进行各种处理

MamyA 2020-10-22
  • 打赏
  • 举报
回复
MamyA 2020-10-22
  • 打赏
  • 举报
回复
没有大佬肯教教小白嘛?
我先森 2022-08-19
  • 举报
回复
@MamyA 你知道学习成本多高嘛,大佬都很累,也很忙

20,808

社区成员

发帖
与我相关
我的任务
社区描述
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
  • 分布式计算/Hadoop社区
  • 涤生大数据
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧