第九课 Canal 下载安装与配置

阿杰笔记 2023-01-13 03:34:07

课时名称	课时知识点
第九课 Canal 下载安装与配置	本节讲述阿里开源的数据同步工具Canal下载安装与配置

...全文

197 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

canal入门原理分享PPT https://download.csdn.net/download/palaomo/10311240Canal测试环境搭建HA详细文档机器规划zookeeper node1:192.168.72.101 node2:192.168.72.102 node3:192.168.72.103 canal node1:192.168.72.101node3: 192.16...

阿里Canal从入门到实战 10年一线开发及项目管理经验，6年以上大数据项目...

alibaba开源数据同步神器——canal

1、之前kettle cdc mysql的时候使用的方案是canal+kafka+kettle，今天我们一起学习下使用kettle的插件Debezium直接cdc mysql。5、Debezium步骤配置中设置ddl为true（输出dml和ddl），更多属性配置参考Debezium官网。2、Debezium步骤配置如下（只输出dml），更多属性配置参考Debezium官网。4）create、delete、update、ddl是写日志步骤，模拟后续操作。3、switch-case配置如下，不做过多介绍。

实时数仓第1天讲义学习目标理解实时数仓项目的基本需求、整体架构了解常用实施方案能够编写Canal客户端采集binlog消息理解google ProtoBuf序列化方式理解Canal采集原理实时计算应用场景及技术选型实时计算在公司的用处公司内已经采用MR与spark之类的技术，做离线计算，为什么用实时计算？离线的伤痛就是数据出的太慢有对实时数据要求高的场景比如：滴滴的风控、淘宝双十一营销大屏、电商购物推荐、春晚的观众数统计实时计算技术选型 Spark streaming

杨文杰的课程社区_NO_1

1

社区成员

22

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章