百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 热门文章 > 正文

「MySQL系列」- binlog你了解过吗

bigegpt 2024-08-18 13:59 6 浏览

如果哪天不小心把表给删了,数据都没了或者一不留神被删库跑路了,那怎么把数据恢复呢?这就需要今天的主角binlog登场了。

binlog 是什么

binlog又称二进制日志,是binary log的结合体。

还是看官方定义:

?

The binary log contains “events” that describe database changes such as table creation operations or changes to table data.

?

翻译:二进制日志包含描述数据库更改的“事件”,如表创建操作或表数据更改。

说白了就是二进制日志记录了对 MySQL 数据库执行更改的所有操作,若操作本身没有导致数据库发生变化,该操作可能也会写入二进制文件。 当然不包括 select和show这类不会对数据本身进行修改的操作。

binlog在语句或事务完成后立即执行,但在释放锁或执行提交之前执行,这可以确保按照提交顺序记录日志。对非事务性表的增删改操作在执行后立即存储在binlog中。

binlog 的作用

binlog主要有两个重要作用,恢复和主从复制,还有其他作用,审计。

  • 恢复(recovery):某些数据恢复操作需要使用二进制日志。恢复备份后,将重新执行在备份后记录的二进制日志中的事件。这些事件使数据库从备份点更新,数据将变化恢复到指定的时间点(Point-in-time)。
  • 主从复制(replication):主数据库向从数据库发送binlog到从数据库,从数据库执行和复制binlog从而将数据恢复到从数据库中。
  • 审计(audit):用户可以通过二进制日志中的信息来进行审计,判断是否有对数据库进行注入的攻击。

binlog的格式

MySQL有好3种格式记录binlog,但具体的格式取决于MySQL数据库的版本。3种格式如下:

  1. STATEMENT:MySQL中的主从复制功能最初是基于SQL语句从源到副本的传播,这称为基于语句的日志记录(statement-based logging)。可以使用参数--binlog-format=STATEMENT进行配置。 优点:只需要记录执行语句的细节和上下文环境,不需要记录每一行的变化,减少了binlog日志量,节省了I/O。缺点:为了保证SQL语句能在slave上正确执行,必须记录上下文信息,以保证所有语句能在slave得到和在master端执行时候相同的结果;另外,主从复制时,存在部分函数(如sleep)及存储过程在slave上会出现与master结果不一致的情况
  2. ROW:默认值。基于行(row-based logging)修改的记录,仅保存修改的行记录。 优点:能清楚地记录每一行数据修改的细节,而且不会出现某些特定情况下的存储过程,或function,以及trigger的调用和触发无法被正确复制的问题。缺点:记录的细节比较多,导致binlog文件会特别大,特别是当执行alter table之类的语句的时候,由于表结构修改,每条记录都发生改变,那么该表每一条记录都会记录到日志中。
  3. MIXED:混合格式,上面两种格式的混用。默认情况下使用的是STATEMENT格式,在某些情况下会转换为ROW格式。一般的语句修改使用STATEMENT格式保存binlog,如一些函数,STATEMENT无法完成主从复制的操作,则采用ROW格式保存binlog,MySQL会根据执行的每一条具体的sql语句来区分对待记录的日志形式,也就是在STATEMENT和ROW之间选择一种.新版本的MySQL中对ROW格式也被做了优化,并不是所有的修改都会以ROW格式来记录,像遇到表结构变更的时候就会以STATEMENT模式来记录。至于update或者delete等修改数据的语句,还是会记录所有行的变更。

binlog的参数

  • log_bin:是否开启binlog,MySQL8.0之前默认是关闭的,之后默认是开启的。需要打开的话只要将配置文件中注释掉的log-bin参数打开,可通过语句SHOW VARIABLES LIKE '%log_bin%'查看binlog是否开启,ON是开启,OFF是关闭。log-bin可配置成log-bin=[name]的形式,其中name字段表示binlog文件的名字,可填可不填,如果不填的话name会自动变为主机名-bin,比如:host-bin.000001。其中000001代表序号,表示第一个binlog文件。
  • log_bin_index:binlog的索引文件的绝对路径,用来存储过往产生的binlog文件,通常情况下,不建议手动修改这个文件。 binlog的索引文件是一个文本文件,可通过记事本打开,里面存储的 默认情况下,log_bin_index的路径和名字跟log-bin的一样。比如:host-bin.index
  • log_bin_basename:binlog的路径和名字,可以通过log-bin配置。binlog默认在MySQL数据路径下。
  • max_binlog_size:单个binlog文件的最大值,默认值也是最大值是1GB,最小值为4096 byte。如果当前binlog文件超过最大值,MySQL会关闭当前binlog文件并重新打开一个并写入。

可以通过命令show binary logs查看都有哪些binlog文件

查看binlog内容

通过mysqlbinlog工具可以查看binlog存储的内容。首先,找到MySQL安装路径下的bin目录,然后进入命令行,我使用的是Windows系统,其他系统类似。最后,在命令行执行以下命令:

mysqlbinlog D:\ProgramData\mysql-bin.000001 --base64-output=decode-rows -v

binlog文件的目录要是绝对路径,并且目录中不要有空格。 --base64-output=decode-rows -v:表示binlog中的SQL语句以注释的形式展现出来。

有一张表如下:

orders@db_test

修改一下表中数据,通过上面命令查看binlog并截取其中一段

binlog部分内容

从binlog中可以看到记录更新前后的数据,这样就可以以可读的方式查看binlog了。

总结

开启binlog会使MySQL性能下降,官网中测试表名性能会下降1%左右。但是binlog的开启利大于弊,在数据需要恢复和主从复制的情况下,binlog的利显得更大。谁也不能保证一定不会出错,根据墨菲定律,只要有可能就一定会发生,万一数据库真的是不小心被格式化了,binlog就发挥很大作用了,binlog可以不用,但一定要有。

参考:

?

https://dev.mysql.com/doc/refman/5.7/en/binary-log.html https://baike.baidu.com/item/Mysql%20Binlog/20618869?fr=aladdin

?


相关推荐

悠悠万事,吃饭为大(悠悠万事吃饭为大,什么意思)

新媒体编辑:杜岷赵蕾初审:程秀娟审核:汤小俊审签:周星...

高铁扒门事件升级版!婚宴上‘冲喜’老人团:我们抢的是社会资源

凌晨两点改方案时,突然收到婚庆团队发来的视频——胶东某酒店宴会厅,三个穿大红棉袄的中年妇女跟敢死队似的往前冲,眼瞅着就要扑到新娘的高额钻石项链上。要不是门口小伙及时阻拦,这婚礼造型团队熬了三个月的方案...

微服务架构实战:商家管理后台与sso设计,SSO客户端设计

SSO客户端设计下面通过模块merchant-security对SSO客户端安全认证部分的实现进行封装,以便各个接入SSO的客户端应用进行引用。安全认证的项目管理配置SSO客户端安全认证的项目管理使...

还在为 Spring Boot 配置类加载机制困惑?一文为你彻底解惑

在当今微服务架构盛行、项目复杂度不断攀升的开发环境下,SpringBoot作为Java后端开发的主流框架,无疑是我们手中的得力武器。然而,当我们在享受其自动配置带来的便捷时,是否曾被配置类加载...

Seata源码—6.Seata AT模式的数据源代理二

大纲1.Seata的Resource资源接口源码2.Seata数据源连接池代理的实现源码3.Client向Server发起注册RM的源码4.Client向Server注册RM时的交互源码5.数据源连接...

30分钟了解K8S(30分钟了解微积分)

微服务演进方向o面向分布式设计(Distribution):容器、微服务、API驱动的开发;o面向配置设计(Configuration):一个镜像,多个环境配置;o面向韧性设计(Resista...

SpringBoot条件化配置(@Conditional)全面解析与实战指南

一、条件化配置基础概念1.1什么是条件化配置条件化配置是Spring框架提供的一种基于特定条件来决定是否注册Bean或加载配置的机制。在SpringBoot中,这一机制通过@Conditional...

一招解决所有依赖冲突(克服依赖)

背景介绍最近遇到了这样一个问题,我们有一个jar包common-tool,作为基础工具包,被各个项目在引用。突然某一天发现日志很多报错。一看是NoSuchMethodError,意思是Dis...

你读过Mybatis的源码?说说它用到了几种设计模式

学习设计模式时,很多人都有类似的困扰——明明概念背得滚瓜烂熟,一到写代码就完全想不起来怎么用。就像学了一堆游泳技巧,却从没下过水实践,很难真正掌握。其实理解一个知识点,就像看立体模型,单角度观察总...

golang对接阿里云私有Bucket上传图片、授权访问图片

1、为什么要设置私有bucket公共读写:互联网上任何用户都可以对该Bucket内的文件进行访问,并且向该Bucket写入数据。这有可能造成您数据的外泄以及费用激增,若被人恶意写入违法信息还可...

spring中的资源的加载(spring加载原理)

最近在网上看到有人问@ContextConfiguration("classpath:/bean.xml")中除了classpath这种还有其他的写法么,看他的意思是想从本地文件...

Android资源使用(android资源文件)

Android资源管理机制在Android的开发中,需要使用到各式各样的资源,这些资源往往是一些静态资源,比如位图,颜色,布局定义,用户界面使用到的字符串,动画等。这些资源统统放在项目的res/独立子...

如何深度理解mybatis?(如何深度理解康乐服务质量管理的5个维度)

深度自定义mybatis回顾mybatis的操作的核心步骤编写核心类SqlSessionFacotryBuild进行解析配置文件深度分析解析SqlSessionFacotryBuild干的核心工作编写...

@Autowired与@Resource原理知识点详解

springIOCAOP的不多做赘述了,说下IOC:SpringIOC解决的是对象管理和对象依赖的问题,IOC容器可以理解为一个对象工厂,我们都把该对象交给工厂,工厂管理这些对象的创建以及依赖关系...

java的redis连接工具篇(java redis client)

在Java里,有不少用于连接Redis的工具,下面为你介绍一些主流的工具及其特点:JedisJedis是Redis官方推荐的Java连接工具,它提供了全面的Redis命令支持,且...