-
等级
本版专家分：0结帖率 100% -
两台服务器之间的mysql做了主从配置，但是发现有两张表主从不一致，分析发现主mysql的binlog里面少了一些insert语句，结果从表中就没有这部分数据，另外奇怪的是，并不是所有的insert都没有，而是部分，也就是说，对主mysql的两张表的部分insert操作没有记录，结果这些数据主表有，从表却没有。展开阅读全文
-
版主
等级
本版专家分：105993勋章
-
-
红花
2017年6月 其他数据库开发大版内专家分月排行榜第一
2017年2月 其他数据库开发大版内专家分月排行榜第一
2013年11月 其他数据库开发大版内专家分月排行榜第一
2013年9月 其他数据库开发大版内专家分月排行榜第一
2013年2月 其他数据库开发大版内专家分月排行榜第一
-
-
黄花
2018年2月 其他数据库开发大版内专家分月排行榜第二
2018年1月 其他数据库开发大版内专家分月排行榜第二
2017年12月 其他数据库开发大版内专家分月排行榜第二
2017年11月 其他数据库开发大版内专家分月排行榜第二
2017年1月 其他数据库开发大版内专家分月排行榜第二
2014年8月 其他数据库开发大版内专家分月排行榜第二
2014年2月 其他数据库开发大版内专家分月排行榜第二
2014年1月 其他数据库开发大版内专家分月排行榜第二
2013年12月 其他数据库开发大版内专家分月排行榜第二
2013年10月 其他数据库开发大版内专家分月排行榜第二
2013年8月 其他数据库开发大版内专家分月排行榜第二
2013年5月 其他数据库开发大版内专家分月排行榜第二
2013年1月 其他数据库开发大版内专家分月排行榜第二
2012年8月 其他数据库开发大版内专家分月排行榜第二
2012年5月 其他数据库开发大版内专家分月排行榜第二
2012年4月 其他数据库开发大版内专家分月排行榜第二
2012年1月 其他数据库开发大版内专家分月排行榜第二
-
-
蓝花
2017年9月 其他数据库开发大版内专家分月排行榜第三
2017年7月 其他数据库开发大版内专家分月排行榜第三
2017年5月 其他数据库开发大版内专家分月排行榜第三
2017年3月 其他数据库开发大版内专家分月排行榜第三
2016年12月 其他数据库开发大版内专家分月排行榜第三
2014年11月 其他数据库开发大版内专家分月排行榜第三
2014年7月 其他数据库开发大版内专家分月排行榜第三
2014年6月 其他数据库开发大版内专家分月排行榜第三
2014年5月 其他数据库开发大版内专家分月排行榜第三
2013年7月 其他数据库开发大版内专家分月排行榜第三
2013年3月 其他数据库开发大版内专家分月排行榜第三
2012年7月 其他数据库开发大版内专家分月排行榜第三
2012年6月 其他数据库开发大版内专家分月排行榜第三
2011年12月 其他数据库开发大版内专家分月排行榜第三
-
-
你说的这种情况基本不太可能
请确定主从表结构完全一致，并且show slave status正常
-
等级
本版专家分：0
-
您好！从表是主表备份恢复的，status正常，因为其他所有表和数据都是能够正常实时备份到从表的，就有两张表的部分插入数据不正常。查了很久才发现是一些insert操作没有记录到binlog文件里，所以无法同步到从机。
首先是binlog里就没有部分insert，感觉跟主从同步不同步还没有关系。
挠头好几天了，也没有解决思路。希望高手指点
-
版主
等级
本版专家分：105993勋章
-
-
红花
2017年6月 其他数据库开发大版内专家分月排行榜第一
2017年2月 其他数据库开发大版内专家分月排行榜第一
2013年11月 其他数据库开发大版内专家分月排行榜第一
2013年9月 其他数据库开发大版内专家分月排行榜第一
2013年2月 其他数据库开发大版内专家分月排行榜第一
-
-
黄花
2018年2月 其他数据库开发大版内专家分月排行榜第二
2018年1月 其他数据库开发大版内专家分月排行榜第二
2017年12月 其他数据库开发大版内专家分月排行榜第二
2017年11月 其他数据库开发大版内专家分月排行榜第二
2017年1月 其他数据库开发大版内专家分月排行榜第二
2014年8月 其他数据库开发大版内专家分月排行榜第二
2014年2月 其他数据库开发大版内专家分月排行榜第二
2014年1月 其他数据库开发大版内专家分月排行榜第二
2013年12月 其他数据库开发大版内专家分月排行榜第二
2013年10月 其他数据库开发大版内专家分月排行榜第二
2013年8月 其他数据库开发大版内专家分月排行榜第二
2013年5月 其他数据库开发大版内专家分月排行榜第二
2013年1月 其他数据库开发大版内专家分月排行榜第二
2012年8月 其他数据库开发大版内专家分月排行榜第二
2012年5月 其他数据库开发大版内专家分月排行榜第二
2012年4月 其他数据库开发大版内专家分月排行榜第二
2012年1月 其他数据库开发大版内专家分月排行榜第二
-
-
蓝花
2017年9月 其他数据库开发大版内专家分月排行榜第三
2017年7月 其他数据库开发大版内专家分月排行榜第三
2017年5月 其他数据库开发大版内专家分月排行榜第三
2017年3月 其他数据库开发大版内专家分月排行榜第三
2016年12月 其他数据库开发大版内专家分月排行榜第三
2014年11月 其他数据库开发大版内专家分月排行榜第三
2014年7月 其他数据库开发大版内专家分月排行榜第三
2014年6月 其他数据库开发大版内专家分月排行榜第三
2014年5月 其他数据库开发大版内专家分月排行榜第三
2013年7月 其他数据库开发大版内专家分月排行榜第三
2013年3月 其他数据库开发大版内专家分月排行榜第三
2012年7月 其他数据库开发大版内专家分月排行榜第三
2012年6月 其他数据库开发大版内专家分月排行榜第三
2011年12月 其他数据库开发大版内专家分月排行榜第三
-
-
还没碰到过master插入数据 而binlog没有记录的，而且还是只针对特定一个表没有记录binlog
能重现吗 不能重现先把数据整同步
-
等级
本版专家分：0
-
奇怪，同步设置里去掉指定同步哪个数据库的设置（现在是同步所有数据库），问题就没了，那两张表的数据也完全同步了。
这不是不能同步指定数据库了吗？
求解啊！！！
-
等级
本版专家分：473046勋章
-
- 名人 2012年 荣获名人称号
-
- 榜眼 2010年 总版技术专家分年内排行榜第二
-
- 探花 2009年 总版技术专家分年内排行榜第三
-
-
进士
2013年 总版技术专家分年内排行榜第十
2011年 总版技术专家分年内排行榜第七
-
-
是否当时的主从有问题？
-
等级
本版专家分：14356勋章
-
- 签到新秀
-
- 脉脉勋章
-
-
主从配置有问题，当初的配置是否成功。
-
等级
本版专家分：0
-
当初的配置是成功的，都能执行，只是里面有2张表的部分数据不能同步。
我们就配置成功后运行，开始检查一些表都正常同步了，以为没问题。后来查到有2张表的一部分数据没同步，就是说这2张表的另一部分数据也是能正常同步的，很奇怪。
现在是把制定同步的数据库配置去掉了，现在是同步所有数据库了（总共有两个数据库，其中一个本事不需要同步的），但是数据都能正常同步了。
-
等级
本版专家分：0
-
复制的过滤主要有２种方式：
1，在主服务器在把事件从进二制日志中过滤掉，相关的参数是:binlog_do_db和binlog_ignore_db。
2，在从服务器上把事件从中继日志中过滤掉，相关的参数是replicate_*。
复制只能扩展读取，不能扩展写入，对数据进行分区可以进行扩展写入。
复制常见的问题：
一，从服务器到底落后于主服务器多少？用Maatkit工具里面的mk-heartbeat脚本。
二，如何确定主从服务器的数据是否一致？用Maatkit工具里面的mk-table-checksum脚本。
复制的优化：
在mysql复制环境中,有8个参数可以让我们控制,需要复制或需要忽略不进行复制的DB或table分别为:
下面二项需要在Master上设置：
Binlog_Do_DB:设定哪些数据库需要记录Binlog
Binlog_Ignore_DB:设定哪里数据库不需要记录Binlog
优点是Master端的Binlog记录所带来的Io量减少，网络IO减少，还会让slave端的IO线程,SQL线程减少，从而大幅提高复制性能,
缺点是mysql判断是否需要复制某个事件不是根据产生该事件的查询所在的DB,而是根据执行查询时刻所在的默认数据库（也就是登录时指定的库名或运行"use database"中指定的DB）,只有当前默认DB和配置中所设定的DB完全吻合时IO线程才会将该事件读取给slave的IO线程.所以,如果在默认DB和设定须要复制的DB不一样的情况下改变了须要复制的DB中某个Table中的数据,该事件是不会被复制到Slave中去的,这样就会造成Slave端的数据和Master的数据不一致.同样,在默认的数据库下更改了不须要复制的数据库中的数据,则会被复制到slave端,当slave端并没有该数据库时,则会造成复制出错而停止.
下面六项需要在slave上设置：
Replicate_Do_DB:设定需要复制的数据库,多个DB用逗号分隔
Replicate_Ignore_DB:设定可以忽略的数据库.
Replicate_Do_Table:设定需要复制的Table
Replicate_Ignore_Table:设定可以忽略的Table
Replicate_Wild_Do_Table:功能同Replicate_Do_Table,但可以带通配符来进行设置。
Replicate_Wild_Ignore_Table:功能同Replicate_Do_Table,功能同Replicate_Ignore_Table,可以带通配符。
优点是在slave端设置复制过滤机制,可以保证不会出现因为默认的数据库问题而造成Slave和Master数据不一致或复制出错的问题.
缺点是性能方面比在Master端差一些.原因在于:不管是否须要复制,事件都会被IO线程读取到Slave端,这样不仅增加了网络IO量,也给Slave端的IO线程增加了Relay Log的写入量.
-
等级
本版专家分：14050
-
指定数据局同步
假如您配置的是同步数据库database-A
但您连接默认的数据库不是database-A,如下面的插入的语句
use database-B;
insert into database-A.table values(...)
这种binlog是不会记录到database-A中的;所以主从就不一致
全部同步则没有这个问题
-
等级
本版专家分：6457勋章
-
- 签到王者
-
-
黄花
2014年10月 其他数据库开发大版内专家分月排行榜第二
2014年9月 其他数据库开发大版内专家分月排行榜第二
-
- 蓝花 2014年8月 其他数据库开发大版内专家分月排行榜第三
-
-
Replicate_Ignore_DB 肯定是这里设置了，所以被过滤了，不录入到binlog里面了啊。
- binlog日志中没有insert的记录
日志中有create、drop的记录，但是没有insert的记录。 解决方法： 登录mysql后，设置binlog的记录格式： set binlog_format=statement; 然后，最好在my.ini中添加： binlog_format=statement
- mysql binlog更新记录缺失_Mysql使用binlog恢复数据解决误操作问题的两种方法
为保证没有其他参数配置影响，重新安装配置了一台最小化安装的CentOS7虚拟机1. 基础知识2. 配置mysql 开启binlog、修改binlog模式为Row Level模式[root@localhost~]# vi /etc/my.cnf修改mysql配置文件，在[mysqld]下...
- MySQL数据库面试题（2020最新版）
文章目录数据库基础知识为什么要使用数据库什么是SQL？什么是MySQL?数据库三大范式是什么mysql有关权限的表都有哪几个MySQL的binlog有有几种录入格式？分别有什么区别？数据类型mysql有哪些数据类型引擎MySQL存储...
- mysql 记录binlog过程_MySQL如何记录binlog
--MySQL如何记录binlog-------------------------------2014/07/08binlog文件的内容 log eventMySQL的binlog文件中记录的是对数据库的各种修改操作，用来表示修改操作的数据结构是Log event。不同的修改操作对应的...
- 详细记录MySQL的binlog日志说明及利用binlog日志恢复数据操作记录
众所周知，binlog日志对于mysql数据库来说是十分...MySQL的二进制日志binlog可以说是MySQL最重要的日志，它记录了所有的DDL和DML语句（除了数据查询语句select），以事件形式记录，还包含语句所执行的消耗的时间，MySQL
- Mysql的binlog日志使用记录详解
开启binlog日志 通过修改my.ini配置文件，在[mysqld] 下面添加 log-bin=日志名称： ######################################################### [mysqld] # The TCP/IP Port the MySQL Server wi...
- mysql 设置 row格式binlog_为什么要把MySQL的binlog格式修改为row
我们知道binlog有两种常用的格式，一种是statement(默认)，一种是row，很多人都说建议你修改为row格式，那么是为什么呢？首先我们需要知道它们两个之间有什么不同？statement格式记录的我们写的SQL语句，而row格式...
- 为什么有binlog还要redo log
为什么不仅使用binlog来支持崩溃恢复，并且还能支持归档为什么不仅使用redo log，不要binlog可以吗？redo log到底是什么，数据最终落盘，是从redo log更新来的吗？redo log buffer是什么？与redo log持久化有关的...
- Mysql之binlog日志说明及利用binlog日志恢复数据操作记录(重要操作)
借鉴：... ... mysql数据库来说是十分重要的(博主体验过一次删库，就差跑路了，还好弄回来了)。在数据丢失的紧急情况下，我们往往会想到用binlog日志功能进行数据恢复（定时...
- mysql insert update 同时执行_详解mysql数据库三种binlog模式
概述Mysql binlog日志有三种格式，分别为Statement,MiXED,以及ROW！这三种格式之间有什么区别呢？下面先介绍下各自的优缺点。ROW日志中会记录成每一行数据被修改的形式，然后在slave端再对相同的数据进行修改，只...
- 在MySQL中使用init-connect与binlog来实现用户操作追踪记录
前言： 测试环境莫名其妙有几条重要数据被删除了，由于在binlog里面只看到是公用账号删除的，无法查询是那个谁在那个时间段...然后配合binlog，就可以追踪到每个操作语句的操作时间，操作人等。实现审计。1，在mys...
- 为什么要把MySQL的binlog格式修改为row
我们知道binlog有两种常用的格式，一种是statement（默认），一种是row，很多人都说建议你修改为row格式，那么是为什么呢？ 首先我们需要知道它们两个之间有什么不同？ statement格式记录的我们写的SQL语句，而row...
- mysql的binlog文件有什么用_谈谈你对Mysql binlog日志的理解？
binlog不会记录SELECT和SHOW这类操作，因为这类操作对数据本身并没有修改，但你可以通过查询通用日志来查看MySQL执行过的所有语句。Binlog日志的作用是什么？因为有了数据更新的binlog，所以可以用于...
- MySQL之binlog的记录格式
MySQL之binlog的记录格式 在MySQL的配置文件(Linux: /etc/my.cnf , Windows: \my.ini)下,修改配置在[mysqld] 区块设置/添加log-bin=mysql-bin, 这个表 示binlog日志的前缀是mysql-bin，以后生成的日志文件就是 mysql...
- 读取binlog的delete记录
如果不小心删除了一批记录，并提交了，在oracle中可以使用闪回查询，闪回版本查询获取丢失的数据，在mysql中没有很好的办法，不过有一种方式是读取二进制文件 前提条件： 1，开启二进制 查看并开启show variables ...
- mysql没有开启binlog能恢复数据吗_删库了，一定要跑路吗？
在 mysql 数据库中，我们知道 binlog 日志记录了我们对数据库的所有操作，所以 binlog 日志就是我们自救的利器。接下来就来开启程序员自救之路。想要自救成功，binlog 这把利器一定要好，在自己之前，我们一定要确定...
- MySQL Binlog 介绍
Binlog 简介 MySQL中一般有以下几种日志： 日志类型 写入日志的信息 错误日志 记录在启动，运行或停止mysqld时遇到的问题 通用查询日志 记录建立的客户端连接和执行的语句 二进制日志 记录更改数据的...
- MySQL 面试题
MySQL 面试题 MySQL 涉及的内容非常非常非常多，所以面试题也容易写的杂乱。当年，我们记着几个一定要掌握的重心： 重点的题目添加了【重点】前缀。 索引。 ...因为 MySQL 还会有部分内容和运维相关度比较高，所以...
- binlog的基本介绍和操作
binlog指二进制日志，它记录了数据库上的所有改变，并以二进制的形式保存在磁盘中，它可以用来查看数据库的变更历史、数据库增量备份和恢复、MySQL的复制（主从数据库的复制）。 binlog有三种格式： statement：...
- 什么是 binlog
转载自 什么是 binlog 引言 为什么写这篇文章? 大家当年在学MySQL的时候，为了能够迅速就业，...为什么呢？因为工作中很少用到嘛。然后呢，市面上流传的大部分这种底层的知识，又比较偏运维，研发懂这么多意义也...
- Mysql之binlog日志说明及利用binlog日志恢复数据操作记录
原文中的重点有标特别的颜色。但是这个文章中有我新加的内容（用红色颜色的字体做...在数据丢失的紧急情况下，我们往往会想到用binlog日志功能进行数据恢复（定时全备份+binlog日志恢复增量数据部分），化险为夷！ ...
- mysql insert 时间_如何解决binlog rotate引发的MySQL阻塞事件-爱可生
背景在大型MySQL集群增加了新的库，运行正常(没有开启GTID)。几天后将新加入的库开启GTID。MySQL版本：5.7.19故障现象变更后，当业务压力开始上升，发现其中一个节点以大概半小时的频率，业务会间断性地发生阻塞。...
- 什么是 binlog？
什么是 binlog？ 孤独烟 程序员小灰 今天 本文转载自公众号 打杂的ZRJ 引言 为什么写这篇文章?...大家当年在学MySQL的时候，为了能够迅速就业，一般是学习...为什么呢？因为工作中很少用到嘛。然后呢，市面上流...
- 使用mysql的binlog恢复误操作(update|delete)的数据
如何使用mysql的binlog恢复误操作(update|delete)的数据 一、binlog格式介绍 MYSQL binlog复制主要有三种方式：基于SQL语句的复制(statement-based replication, SBR)，基于行的复制(row-based replication, RBR)，...
- MySQL恢复工具之binlog2sql闪回操作恢复误操作数据
MySQL恢复工具之binlog2sql闪回操作恢复误操作数据 工具官网：https://github.com/danfengcao/binlog2sql 本文所有依赖包链接：https://share.weiyun.com/57HUxNi ---binlog2sql工具安装过程：...
- MySQL Binlog 解析工具 Maxwell 详解
Maxwell是一个能实时读取MySQL二进制日志binlog，并生成 JSON 格式的消息，作为生产者发送给 Kafka，Kinesis、RabbitMQ、Redis、Google Cloud Pub/Sub、文件或其它平台的应用程序。它的常见应用场景有ETL、维护缓存...
- 阿里云RDS数据库通过binlog找回删除的记录
今天管理员把几天前别人发的文章删除了，找到我看能否找回来，还好我们阿里云是做了备份的，但阿里云的恢复备份还需要再购买一个临时实例，好在还有binlog日志，把binlog日志下载下来，当然如果那一天的日志没有了，...
- 查看mysql binlog日志_mysql查看binlog日志内容
(一) binlog介绍binlog,即二进制日志,它记录了数据库上的所有改变，并以二进制的形式保存在磁盘中；它可以用来查看数据库的变更历史、数据库增量备份和恢复、Mysql的复制(主从数据库的复制)。(二) binlog格式binlog...
- 5.7新特性：mysql打开binlog的SQL记录，排查问题更快捷
binlog_rows_query_log_events 默认关闭 ，可选打开，建议打开，还是比较有用的。可以看到row格式下的sql语句，方便排查问题和恢复数据。 (1)首先是先从binlog中恢复出来。 /usr/local/mysql/3308/bin/...
- binlog 日志是什么和它的三种格式
binlog 日志是什么？ Mysql binlog是二进制日志文件，用于记录mysql的数据...binlog记录的所有操作实际上都有对应的事件类型的MySQL binlog的三种工作模式：ROW（行模式）, Statement（语句模式）, Mixed（混合模式）