求助 --mysqlbinlog read-from-remote 最后一条记录同步异常-CSDN论坛

求助 --mysqlbinlog read-from-remote 最后一条记录同步异常

其他数据库开发 > MySQL

收藏回复

[问题点数：40分，结帖人totola147]

⋅pyinstaller 打包动态加载模块失效的问题 ⋅-- 求助 php lib_ssh2 问题 ⋅求助 --mysqlbinlog read-from-remote 最后一条记录同步异常 更多帖子 关注私信空间博客 totola147 等级 本版专家分：65 结帖率 98.84%: 环境：
auto_commit=1
innodb_flush_log_at_trx_commit=1
sync_binlog=1
binlog_format=ROW
mysql version=5.6.33

问题：
我用mysqlbinlog 做binlog server  但是最后一个语句后的commit 总是无法同步（源库事务已经提交没有未提交事务！）
除非我在原库上执行 commit ; 或者flush logs;或者再插入一条记录，但是新的一条记录后面的commit 再次缺失
如下图示：

mysqlbinlog  --read-from-remote-server  --raw --result-file=$v_fullpath/  --stop-never --stop-never-slave-server-id=xx  mysql-bin.000015

数据库里的binlog event

mysqlbinlog --stop-never 拉取到的binlog

请问大家如何使得mysqlbnilog能够完全同步binlog

使用 -to-last-log 则是正常的

我测试了statement模式  也是一样的结果  最后一条语句缺少commit

难道就只能我自己在最后一个rollback前面添加commit吗？

2017-03-29 17:54:44

点赞只看楼主引用举报楼主收起

展开阅读全文

⋅pyinstaller 打包动态加载模块失效的问题 ⋅-- 求助 php lib_ssh2 问题 ⋅求助 --mysqlbinlog read-from-remote 最后一条记录同步异常 更多帖子 关注私信空间博客 totola147 等级 本版专家分：65: 异常的原因及规避方法参考下文：
https://mp.weixin.qq.com/s/m-LotQ_LIdWFO_RRnNbCDw

感谢沃趣科技！

2017-06-20 15:26:23

点赞只看TA 引用举报 #1得分 0

⋅请教一下golang 中如何实现 override ⋅zjcxc--个人微信公共号同名的留言板 ⋅如果获取进程的资源使用数据？ 更多帖子 关注私信空间博客 版主 zjcxc--个人微信公共号同名 等级 本版专家分：27873 勋章 名人年度总版至少三次排名前十即授予名人勋章 状元 2005年总版技术专家分年内排行榜第一 2004年总版技术专家分年内排行榜第一 进士 2006年总版技术专家分年内排行榜第六 2003年总版技术专家分年内排行榜第八 金牌 2005年6月总版技术专家分月排行榜第一 2005年5月总版技术专家分月排行榜第一 2005年4月总版技术专家分月排行榜第一 2005年3月总版技术专家分月排行榜第一 2005年2月总版技术专家分月排行榜第一 2005年1月总版技术专家分月排行榜第一 2004年12月总版技术专家分月排行榜第一 2004年11月总版技术专家分月排行榜第一 2004年10月总版技术专家分月排行榜第一 2004年9月总版技术专家分月排行榜第一 2004年8月总版技术专家分月排行榜第一 2004年7月总版技术专家分月排行榜第一 2004年6月总版技术专家分月排行榜第一 2004年5月总版技术专家分月排行榜第一 2004年4月总版技术专家分月排行榜第一 2004年3月总版技术专家分月排行榜第一 2004年1月总版技术专家分月排行榜第一 2003年12月总版技术专家分月排行榜第一: 我的也是 5.7.18，没发现有楼主说的问题

2017-06-21 10:15:07

点赞只看TA 引用举报 #2得分 40

⋅请教一下golang 中如何实现 override ⋅zjcxc--个人微信公共号同名的留言板 ⋅如果获取进程的资源使用数据？ 更多帖子 关注私信空间博客 版主 zjcxc--个人微信公共号同名 等级 本版专家分：27873 勋章 名人年度总版至少三次排名前十即授予名人勋章 状元 2005年总版技术专家分年内排行榜第一 2004年总版技术专家分年内排行榜第一 进士 2006年总版技术专家分年内排行榜第六 2003年总版技术专家分年内排行榜第八 金牌 2005年6月总版技术专家分月排行榜第一 2005年5月总版技术专家分月排行榜第一 2005年4月总版技术专家分月排行榜第一 2005年3月总版技术专家分月排行榜第一 2005年2月总版技术专家分月排行榜第一 2005年1月总版技术专家分月排行榜第一 2004年12月总版技术专家分月排行榜第一 2004年11月总版技术专家分月排行榜第一 2004年10月总版技术专家分月排行榜第一 2004年9月总版技术专家分月排行榜第一 2004年8月总版技术专家分月排行榜第一 2004年7月总版技术专家分月排行榜第一 2004年6月总版技术专家分月排行榜第一 2004年5月总版技术专家分月排行榜第一 2004年4月总版技术专家分月排行榜第一 2004年3月总版技术专家分月排行榜第一 2004年1月总版技术专家分月排行榜第一 2003年12月总版技术专家分月排行榜第一: 只遇到像是缓存的问题，随意 insert 一些记录，在 master 中查 binlog 是有数据的（结尾是正常的 commit)
但 mysqlbinlog 转储的文件中读不到，在 master 上 flush logs / 终止 mysqlbinlog 或者在 master 上写入大数据，这个时候可以从转储的文件中读取，而且是有正常的 commit
出现 rollback 的也会有一个类似下面的错误，但 “ 在 master 上 flush logs / 终止 mysqlbinlog 或者在 master 上写入大数据 ”, 后正常，应该也是缓存的数据没有写入转储文件导致
ERROR: Error in Log_event::read_log_event(): 'read error', data_len: 4194347, event_type: 30

2017-06-21 10:28:24

点赞只看TA 引用举报 #3得分 0

收起

收藏回复

totola147

等级：

关注私信 TA的帖子

求助--mysqlbinlog 最后一条记录异常

mysql同步binlog_【实用脚本】使用mysqlbinlog部署binlog server实时同步binlog: 脚本作用：实时拉取指定数据库实例上的binlog日志到本地进行存储应用场景：数据增量备份、MHA binlog server#!/bin/shBACKUP_BIN=/usr/local/percona-server-5.7.17/bin/mysqlbinlogLOCAL_BACKUP_DIR=/data2/...

mysql-bin position_mysqlbinlog基于某个偏移量进行数据的恢复(重做),--start-position,--stop-position的...: 需求描述:今天在看mysqlbinlog的内容,看到了--start-position和--stop-position这些选项,就测试下这个参数具体该怎么进行使用呢,在此记录下.操作过程:1.通过mysqlbinlog以文本的格式查看某个binlog的内容[mysql@...

mysqlbinlog -v -vv --base64-output参数的区别: 文章目录1.1 涉及binlog的知识点带入1.2 -v -vv及--base64-output之间的区别1.3 测试环境说明1.4 测试数据准备1.4 找出insert语句的post点1.5 不用-v -vv --base64-...01：binlog会记录DDL、DCL、DML(除select)类的

mysqlbinlog数据恢复，--skip-gtids=true: mysqlbinlog工作中最常用的功能可能就是解析binlog了，写成脚本，一次可以解析多个，今天玩玩mysqlbinlog恢复数据的用法. 1，单个binlog恢复数据。先看看test库下t1表的数据情景，不小心误删数据。现在使用...

MAC报错：-bash: mysqlbinlog : command not found: 1.背景做MySQL binlog日志恢复报错...(base) lcc@lcc ~$ sudo mysqlbinlog --no-defaults /usr/local/mysql-5.7.28-macos10.14-x86_64/data/mysql-bin.000001 > 1.txt (base) lcc@lcc ~$ sudo mysqlbinlog --no-...

MySQL：从库binlog 使用mysqlbinlog stop-datetime过滤问题: 更多主从同步相关可以参考我的《深入理解MySQL主从原理》专栏：本文是一个朋友问我问题。从库使用mysqlbinlog...

通过mysqlbinlog --skip-gtids恢复后再备份可能造成的坑: 通过mysqlbinlog –skip-gtids恢复后再备份可能造成的坑版本[root@uz22199 backup]# innobackupex --version innobackupex version 2.4.8 Linux (x86_64) (revision id: 97330f7) [root@uz22199 backup]# mysql -e...

mysqlbinlog -v与-vv --base64-output 与不加的区别: -v, --verboseReconstruct pseudo-SQL statements out of row events. -v -v adds comments on column data types. -v参数是可能从binlog中重建sql语句，这对于误操作的恢复很我帮助。-vv增加了备注部分 ...

mysqlbinlog --start-datetime: 查看数据文件路径 show global variables like "%datadir%"; ...mysqlbinlog --start-datetime="2016-11-17 14:40:00" "/data/software/mysql/mysql-bin.000001" --result-file=/data/result.

mysqlbinlog 加-v -vv 的区别: 先看命令帮组解释： -v, --verbose Reconstruct pseudo-SQL statements out of row events. --显示sql 语句-vv Reconstruct pseudo-SQL statements out of row events. adds comments on column data types.--...

远程备份MySQL binlog: mysqlbinlog --read-from-remote-server --raw --host=IP --port=3306 --user=repl --password=repl --stop-never mysql-bin.000001 解释如下： --read-from-remote-server：用于备份远程服务器的binlog。如果不...

mysqlbinlog --database选项注意事项: mysqlbinlog查询时通过--database=db1选项指定某一具体数据库时，使用statement log模式只有在显示输入use db1之后的语句才会被mysqlbinlog输出。如：INSERT INTO test.t1 (i) VALUES(100);INSERT INTO db2.t2 (j) ...

为什么mysqlbinlog --database选项不起作用: 群里看到有同学提问，多...[root@mysql55 mysql]# mysqlbinlog --no-defaults -vv --base64-output=decode-rows mysql-bin.000004 --skip-gtids ... # at 3370 #171026 10:06:36 server id 1 end_log_pos 3465 ...

mysql数据恢复---mysqlbinlog恢复: 记录一下 mysqlbinlog恢复前提是需要开启binlog这个功能先执行 flush logs 生成新的binlog再继续记录数据 linux上的mysql数据库，下载mysql-bin.00*（也可能是relay-bin.00*）文件回来 win7下载mysqlbinlog....

MySQL mysqlbinlog查看binlog时报错unknown variable 'default-character-set=utf8'解决: 1.问题描述C:\Users\heqianqian>mysqlbinlog mysql-bin.000003 mysqlbinlog: unknown variable 'default-character-set=utf8'2.原因mysqlbinlog这个工具无法识别binlog中的配置中的default-character-set=utf8这个...

mysqlbinlog恢复数据-GTID: mysqlbinlog恢复数据-GTID## 标题 1、数据准备 mysql> use hyc Database changed mysql> show tables; Empty set (0.00 sec) mysql> show master status\G *************************** 1. row ***********...

mysqlbinlog --help翻译: mysqlbinlog --help mysqlbinlog Ver 3.4 for Linux at x86_64 ==> 在x86_64为Linux编写的mysqlbinlog版本3.4 Copyright (c) 2000, 2018, Oracle and/or its affiliates. All rights reserved. =>...

MySQL 数据库mysqlbinlog使用问题：unknown variable ‘default-character-set=utf8‘.解决方法: [root@localhost bin]# "/usr/local/mysql-8.0.11/bin/mysqlbinlog" "/usr/local/mysql-8.0.11/data/binlog.000025" mysqlbinlog: [ERROR] unknown variable 'default-character-set=utf8' 解决方法：加入个 –no-...

mysqlbinlog 查看binlog时报错unknown variable 'default-character-set=utf8': binlog文件是无法直视的，mysqlbinlog这个工具是用来查看binlog文件内容的（使用方式man mysqlbinlog查看），但是使用mysqlbinlog将binlog文件转换成人类可读的内容时却报错： # 直接查看 [xxx@lcc log]$ ...

my09_mysql指定时间点恢复之binlog start-position: 场景描述 ...之后，删除了库中所有表，然后又重建一批表，并插入了大量数据，重建的表与原来的表有重名的表（比如sbtest1）然后要求恢复删除之前其中一张表sbtest1的数据恢复思路 ***********...

MySQL binlog 远程备份方法详解: 以前备份binlog时，都是先在本地进行备份压缩，然后发送到远程服务器中。但是这其中还是有一定风险的，因为日志的备份都是周期性的，如果在某个周期中，服务器宕机了...从MySQL5.6开始，mysqlbinlog支持将远程服务器上

使用mysqlbinlog提取二进制日志: MySQL binlog日志记录了MySQL数据库从启用日志以来所有对当前数据库的变更。binlog日志属于二进制文件，我们可以从binlog提取出来生成可阅读的SQL语句来重建当前数据库以及根据需要实现时点恢复或不完全恢复。本文...

“mysqlbinlog”工具做binlog server靠谱吗？: 玩过binlog server的同学都知道，它使用mysqlbinlog命令以daemon进程的方式模拟一个slave的IO线程与主库连接，可以很方便地即时同步主库的binlog，以便弥补定时备份策略中最近一次备份到下一次备份完成之前这段时间...

mysql从服恢复记录 Error reading packet from server: File '/var/lib/mysql/mysql-bin.006150' not found...: 150410 13:17:41 [ERROR] Error reading packet from server: File '/var/lib/mysql/mysql-bin.006150' not found (Errcode: 13) ( server_errno=29) 150410 13:17:41 [Note] Slave I/O thread: Failed readin

mysql binlog更新记录缺失_mysqlbinlog --处理二进制更新日志的工具: mysqlbinlog:Utility for Processing Binary Log FilesThe binary log files that the server generates are written in binary format. To examine these files in text format, use the mysqlbinlog utility.Invok...

MySQL binlog-server搭建: MySQL binlog-server搭建 binlog在备份中起着至关重要的作用，备份binlog文件时，只能先在本地备份，然后才能传送到远程服务器上。从MySQL5.6版本后，可以利用...-R | –read-from-remote-server 表示开启binlog...

mysql报错解决MySQL Binlog(异常)——mysqlbinlog: unknown variable 'default-character-set=utf8'...: 在使用mysqlbinlog分析日志时，报错：/usr/local/mysql/bin/mysqlbinlog:unknownvariable'default-character-set=utf8'原因分析：产生这个问题的原因是因为我在my.cnf中的client选项组中...这个是mysqlbinlog的一个...

OpenGL: 课程涵盖了OpenGL开发的方方面面,对开发中经常用到的开发知识点进行讲解,从实战的角度进行编码设计. 第1章-环境建立第2章-基础图元第3章-三维世界第4章-纹理多彩世界第5章-显存的分配-优化第6章-场景控制第7章-光照-真实世界第8章-模型第9章-UI制作第10章-场景编辑器制作第11章-地形第12章-脚本引入-lua 教程从最最本的固定管线开始,一节课一个知识点,从实战的角度出发,结合项目开发中经常用到的知识点作深入的讲解,以面向对象的编成方式对知识点进行封装,可以直接引入到项目中使用.通过课程的学习,掌握OpenGL图形编程技巧,并能学以致用.

从零基础开始用Python处理Excel数据.pdf: 首先学习Python的基础知识，然后使用Python来控制Excel，做数据处理。 Excel使用者、Python爱好者、数据处理人员、办公人员等第1章 python基础 1.1 什么是python？ 1.2 为什么要学习用Python处理Excel表格？ 1.3 手把手教你安装python程序 1.3.1 下载python 1.3.2 安装python 1.3.3 验证是否安装成功 1.4 安装Python集成开发工具PyCharm 1.4.1 下载 1.4.2 安装 1.5 Python的输入与输出

相关热词 c#dataview c#参与web开发 c#声明int数组 c#aforge人脸识别 c#判断服务 c# 获取串口号 c#实现好友列表 c# 输出二进制字符串 c#udp 客户端 c#面向对象内容