Flink + Kafka 实现通用流式数据处理详解

小码农叔叔

Java领域优质创作者

博客专家认证

2024-10-29 18:19:12

https://blog.csdn.net/zhangcongyi420/article/details/143027849?spm=1001.2014.3001.5502

...全文

29 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

给大家分享一套课程——基于Flink+Iceberg构建可落地的企业级实时数据湖教程，附代码+课件。

网上很少能找到flink的生产项目，这个项目是关于系统运维方面的流式处理，生产上的注意点，代码里基本都有体现，对初学者应该有一些帮助，其他的，就去官方demo上学习吧。

引入Kafka(https://blog.csdn.net/zpcandzhj/article/details/108770504)连接器pom依赖，连接器的版

Kafka全套视频教程 Kafka是由Apache软件基金会开发的一个开源流处理平台，由Scala和Java编写。Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者在网站中的所有动作流数据。这种动作（网页浏览，搜索和其他用户的行动）是在现代网络上的许多社会功能的一个关键因素。这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。对于像Hadoop一样的日志数据和离线分析系统，但又要求实时处理的限制，这是一个可行的解决方案。Kafka的目的是通过Hadoop的并行加载机制来统一线上和离线的消息处理，也是为了通过集群来提供实时的消息。

kafka_2.11-2.2.0 kafka流信息处理平台，最新下载资源，亲测有效

小虚竹技术社区

134,697

社区成员

1,393

社区内容

发帖

与我相关

我的任务

AIGC后端个人社区

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

试试用AI创作助手写篇文章吧

+ 用AI写文章