社区
数据仓库
帖子详情
急急急!求大神maxwell发送binlog日志到kafka去,数据丢失,咋办
qq_17249217
2017-11-24 09:08:25
maxwell发送binlog到kafka消费者中,kafka在把消息写到另一个数据库(kafka)中去,因为数据库错误的问题,导致写入(kafka)时丢失了一些数据,这些数据在,错误日志中已经找到。求大神该如何手动把这些数据发送到kafka中去,让其重新写一遍数据库!!!
...全文
6040
3
打赏
收藏
急急急!求大神maxwell发送binlog日志到kafka去,数据丢失,咋办
maxwell发送binlog到kafka消费者中,kafka在把消息写到另一个数据库(kafka)中去,因为数据库错误的问题,导致写入(kafka)时丢失了一些数据,这些数据在,错误日志中已经找到。求大神该如何手动把这些数据发送到kafka中去,让其重新写一遍数据库!!!
复制链接
扫一扫
分享
转发到动态
举报
AI
作业
写回复
配置赞助广告
用AI写文章
3 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
Jegger_Z
2020-05-29
打赏
举报
回复
请问如何把丢失数据放入到日志中
pppkq
2017-11-27
打赏
举报
回复
楼主,部署过程和配置文件分享一下可以吗? 我正在用这个尝试mysql实时同步到kafka,但是topic内没有消息,不知道哪里不对,想对比一下,谢谢!
LongRui888
2017-11-27
打赏
举报
回复
如果有固定的格式,可以考虑用shell脚本配合sed,awk等,把数据取出来,然后生成insert 语句,最后执行一下sql就行了
max
well,
max
well的守护进程,一个mysql到json的
kafka
生产者.zip
这是
max
well的守护进程,一个读取mysql
bin
log
s并写入
max
well采集器
抽取
数据
库的
日志
既能够很大的减轻
数据
库服务的压力,又能够解决实时处理实时展示图表的需
求
。
max
well采集MySQL
Bin
log
日志
提供解决方案
max
well-1.22.1安装包(读取MySQL的
bin
log
).zip
max
well-1.22.1安装包(读取MySQL的
bin
log
).zip
max
well,mysql
bin
log
采集的工具
max
well,用于mysql的
bin
log
采集,通过
kafka
,实现mysql的实时同步
MySQL
数据
库增量
日志
解析工具cannel、
max
well
cannel实战。项目中如何使用cannel实现订阅
数据
库的
bin
log
日志
,然后进行一些
数据
消费。 一、
bin
log
介绍 二、cannel介绍 三、cannel实操 四、
max
well实操
数据仓库
7,393
社区成员
6,740
社区内容
发帖
与我相关
我的任务
数据仓库
其他数据库开发 数据仓库
复制链接
扫一扫
分享
社区描述
其他数据库开发 数据仓库
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章