mysql--binlog相关

mysql--binlog相关

   张吉吉     2021年3月26日 08:42     1382    

1.binlog的作用

binlog中记录了所有DDL和DML的操作，除了select和show所做的操作。

DDL: 对数据库中的某些对象进行管理，如Create,Alter和Drop.

DML: 对数据库中的数据进行的操作，如insert,delete,update,select等.

  • MySQL主从复制：Replication在Master端开启binlog，Master把它的二进制日志传递给slaves来达到master-slave数据一致的目的

  • 数据恢复：通过使用 mysqlbinlog工具来使恢复数据，其可以根据pos和时间进行一定数据量的恢复。

  • 增量备份：通过mysqldump做全量备份，然后使用binlog做增量备份，达到数据尽可能多的备份。

2.binlog持久化

sync_binlog是最重要的一个参数，这个参数的作用是规定了binlog写入磁盘的时机，并且其也影响mysql在运行过程中对系统性能的影响。

sync_binlog=0，当事务提交之后，MySQL不做fsync之类的磁盘同步指令刷新binlog_cache中的信息到磁盘，而让Filesystem自行决定什么时候来做同步，或者cache满了之后才同步到磁盘。

sync_binlog=n，当每进行n次事务提交之后，MySQL将进行一次fsync之类的磁盘同步指令来将binlog_cache中的数据强制写入磁盘。

sync_binlog=1，当设置为1的时候，是最安全但是性能损耗最大的设置。因为当设置为1的时候，即使系统Crash，也最多丢失binlog_cache中未完成的一个事务，对实际数据没有任何实质性影响。

show variables like "sync_binlog";

可以查看同步的策略

3.binlog新增

当遇到以下3种情况时，MySQL会重新生成一个新的日志文件，文件序号递增：

  • MySQL服务器停止或重启时

  • 使用 flush logs 命令；

  • 当 binlog 文件大小超过 max_binlog_size 变量的值时，默认值max_binlog_size 1073741824，也就是1G。

4.binlog的格式

binlog日志有三种格式

通过命令show variables like 'binlog_format';可以查看其格式。

STATEMENT：基于SQL语句的复制（statement-based replication, SBR）

ROW：基于行的复制（row-based replication, RBR）

MIXED：混合模式复制（mixed-based replication, MBR）

在 MySQL 5.7.7 之前，默认的格式是 STATEMENT，在 MySQL 5.7.7 及更高版本中，默认值是 ROW。

  • Statement

每一条会修改数据的sql都会记录在binlog中。

优点：不需要记录每一行的变化，减少了binlog日志量，节约了IO，提高性能。

缺点：由于记录的只是执行语句，为了这些语句能在slave上正确运行，因此还必须记录每条语句在执行的时候的一些相关信息，以保证所有语句能在slave得到和在master端执行时候相同 的结果。另外mysql 的复制,像一些特定函数功能，slave可与master上要保持一致会有很多相关问题。

ps：相比row能节约多少性能与日志量，这个取决于应用的SQL情况，正常同一条记录修改或者插入row格式所产生的日志量还小于Statement产生的日志量，但是考虑到如果带条件的update操作，以及整表删除，alter表等操作，ROW格式会产生大量日志，因此在考虑是否使用ROW格式日志时应该跟据应用的实际情况，其所产生的日志量会增加多少，以及带来的IO性能问题。

  • Row

5.1.5版本的MySQL才开始支持row level的复制,它不记录sql语句上下文相关信息，仅保存哪条记录被修改。

优点： binlog中可以不记录执行的sql语句的上下文相关的信息，仅需要记录那一条记录被修改成什么了。所以rowlevel的日志内容会非常清楚的记录下每一行数据修改的细节。而且不会出现某些特定情况下的存储过程，或function，以及trigger的调用和触发无法被正确复制的问题.

缺点:所有的执行的语句当记录到日志中的时候，都将以每行记录的修改来记录，这样可能会产生大量的日志内容。

ps:新版本的MySQL中对row level模式也被做了优化，并不是所有的修改都会以row level来记录，像遇到表结构变更的时候就会以statement模式来记录，如果sql语句确实就是update或者delete等修改数据的语句，那么还是会记录所有行的变更。

  • Mixed

从5.1.8版本开始，MySQL提供了Mixed格式，实际上就是Statement与Row的结合。

在Mixed模式下，一般的语句修改使用statment格式保存binlog，如一些函数，statement无法完成主从复制的操作，则采用row格式保存binlog，MySQL会根据执行的每一条具体的sql语句来区分对待记录的日志形式，也就是在Statement和Row之间选择一种。

参考：https://blog.csdn.net/ouyang111222/article/details/50300851


文章评论

0

其他文章