十四、MySQL日志之 binlog日志

news2024/11/15 13:28:47

目录

一、二进制日志(Binary log)

1、binlog主要应用场景:

2、查看默认情况

3、日志参数设置

(1)永久设置

(2)临时性设置

4、查看日志

5、删除二进制日志

总结:


一、二进制日志(Binary log)

        binlog可以说是MySQL中比较重要的日志了,在日常开发和运维中经常用到。

        binlog即binary log,二进制日志文件,它记录了数据库中所有执行的DDL和DML等数据库更新时间的语句。但是不包括没有修改任何数据的语句(例如 select show 等)。

        它以时间形式,记录并保存在二进制文件中,通过这些信息,我们可以再现数据更新操作的全过程。

1、binlog主要应用场景:

  1. 用于数据恢复,如果MySQL数据库意外停止,可以通过二进制日志文件查看用户执行了哪些操作,对数据库服务器文件做了哪些修改,然后根据二进制日志文件中的记录来恢复数据库服务。
  2. 用于数据复制,由于日志的延续性和时效性,master把它的二进制日志传递给slaves来达到主从一致的目的。

        可以说MySQL数据库的数据备份、主备、单主、多主、MGR都离不开binlog,需要用它来同步数据,保持数据的一致性。

2、查看默认情况

查看记录二进制日志是否开启:在MySQL8中默认情况下,二进制文件是开启的。
(root@localhost) [(none)]> show variables like '%log_bin%';
+---------------------------------+--------------------------------+
| Variable_name                   | Value                          |
+---------------------------------+--------------------------------+
| log_bin                         | ON                             | //开关
| log_bin_basename                | /var/lib/mysql/mysql-bin       |
//存放路径
| log_bin_index                   | /var/lib/mysql/mysql-bin.index |
//索引文件,管理了所有binlog文件的目录
| log_bin_trust_function_creators | OFF                            |
//函数创建
| log_bin_use_v1_row_events       | OFF                            |
| sql_log_bin                     | ON                             |//变更sql记录下来
+---------------------------------+--------------------------------+
log_bin_basename:是binlog日志的基本文件名,后面会追加标识来表示每一个文件
log_bin_index:是binlog文件的素引文件,这个文件管理了所有的binlog文件的目录
log_bin_trust_function_creators:限制存储过程,前面我们已经讲过了,这是因为二进制日志的一个重要功能是用于主从复制,而存储函数有可能导致主从的数据不一致。所以当开启二进制日志后,需要限制存储函数的创建、修改、调用
log_bin_use_v1_row_events此只读系统变量已弃用。ON表示使用版本1二进制日志行,OFF表示使用版本2二进制日志行(MySQL5.6的默认值为2)。

3、日志参数设置

(1)永久设置

        在MySQL的配置文件中(my.cnf)

[mysqld]
#启用二进制日志
log-bin=mysql-bin
binlog_expire_logs_seconds= 600  //此参数控制二进制日志文件保留的时长单位是秒,默认2592000 30天 --14400 4小时;86400 1天; 259200 3天;
max_binlog_size=100M  //控制单个二进制日志大小,当前日志文件大小超过此变量时,执行切换动作。默认值是1GB
binlog_rows_query_log_evects = 1 //记录行的操作

(2)临时性设置

        如果不希望通过修改配置文件并重启的方式设置二进制日志的话,还可以使用如下指令,需要注意的是在mysql 8 中只有会话级别的设置,没有了global级别的设置。

(root@localhost) [test]> show variables like 'binlog_rows_query_log_events';
+------------------------------+-------+
| Variable_name                | Value |
+------------------------------+-------+
| binlog_rows_query_log_events | OFF   |
+------------------------------+-------+
(root@localhost) [test]> set binlog_rows_query_log_events=1;
# global 级别
mysql> set global sql_log_bin= 0 ;
ERROR 1228 (HY000): Variable 'sql_log_bin' is a SESSION variable and can`t be used
with SET GLOBAL

# session级别
mysql> SET sql_log_bin = 0 ;
Query OK, 0 rows affected (0.01 秒)

4、查看日志

        当MySQL创建二进制日志文件时,先创建一个以“filename”为名称、以“.index”为后缀的文件,再创建一个以“filename”为名称、以“.000001”为后缀的文件。

        MySQL服务重新启动一次,以“.000001”为后缀的文件就会增加一个,并且后缀名按 1 递增。即日志文件的数与MySQL服务启动的次数相同;如果日志长度超过了max_binlog_size的上限(默认是1GB),就会创建一个新的日志文件。

        查看当前的二进制日志文件列表及大小。

(root@localhost) [(none)]> show binary logs;
+------------------+-----------+-----------+
| Log_name         | File_size | Encrypted |
+------------------+-----------+-----------+
| mysql-bin.000096 |       178 | No        |
| mysql-bin.000097 |       178 | No        |
| mysql-bin.000098 |      1141 | No        |
| mysql-bin.000099 |       178 | No        |
| mysql-bin.000100 |       863 | No        |
| mysql-bin.000101 |      5620 | No        |
| mysql-bin.000102 |       178 | No        |
| mysql-bin.000103 |       178 | No        |
| mysql-bin.000104 |    140033 | No        |
| mysql-bin.000105 |      3875 | No        |
| mysql-bin.000106 |       178 | No        |
| mysql-bin.000107 |       938 | No        |
| mysql-bin.000108 |       155 | No        |
+------------------+-----------+-----------+
查看binlog 格式
(root@localhost) [(none)]> show variables like 'binlog_format';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| binlog_format | ROW   |
+---------------+-------+
1 row in set (0.01 sec)

        所有对数据库的修改都会记录在binglog中。但binlog是二进制文件,无法直接查看,借助mysqlbinlog命令工具了。

        关于mysqlbinlog工具的使用技巧还有很多,例如只解析对某个库的操作或者某个时间段内的操作等。简单分享几个常用的语句,更多操作可以参考官方文档。

(root@localhost) [test]> 
(root@localhost) [test]> show binlog events in 'mysql-bin.000024';
+------------------+------+----------------+-----------+-------------+--------------------
| Log_name         | Pos  | Event_type     | Server_id | End_log_pos | Info  
                                     
    Log_name    : 这是二进制日志文件的名称。
    Pos    : 这是当前事件在日志文件中的位置。
    Event_type    : 这是事件的类型,例如:
    FORMAT_DESCRIPTION_EVENT: 二进制日志的格式描述。
    QUERY_EVENT: SQL查询事件。
    UPDATE_ROWS_EVENT: 更新事件,表示对行的更改。
    WRITE_ROWS_EVENT: 插入事件,表示向表中插入新行。
    DELETE_ROWS_EVENT: 删除事件,表示从表中删除行。

    Server_id    : 产生该事件的MySQL服务器的ID。在复制环境中,这是很重要的,因为从服务器会使用这个ID来识别它应该从哪个位置开始读取二进制日志。
    End_log_pos    : 该事件在日志文件中的结束位置。
    Info    : 这通常提供了关于事件的更多详细信息

# 可查看参数帮助
mysqlbinlog --no-defaults --help

# 查看最后 100 行
mysqlbinlog --no-defaults --base64-output=decode-rows -vv mysql-bin.000108 |tail - n 100


# 根据position查找
mysqlbinlog --no-defaults --base64-output=decode-rows -vv mysql-bin.000108 |grep -A 20 '4939002'
上面这种办法读取出binlog日志的全文内容比较多,不容易分辨查看到pos点信息,下面介绍一种更为方便的查询命令:
mysql> show binlog events [IN 'log_name'] [FROM pos] [LIMIT [offset,] row_count];
IN 'log_name':指定要查询的binlog文件名
FROM pos:指定从哪个pos起始点开始查起
LIMIT [offset]:偏移量(不指定就是 0 )
row_count :查询总条数(不指定就是所有行)
#a、查询第一个最早的binlog日志:
show binlog events\G ;

#b、指定查询mysql-bin.088802这个文件
show binlog events in 'mysql-bin.000108'\G

#c、指定查询mysql-bin. 080802这个文件,从pos点:391开始查起:
show binlog events in 'mysql-bin.000108' from 391\G

#d、指定查询mysql-bin.000802这个文件,从pos点:391开始查起,查询5条(即5条语句)
show binlog events in 'mysql-bin.000108' from 391 limit 5\G

#e、指定查询 mysql-bin.880002这个文件,从pos点:391开始查起,偏移2行〈即中间跳过2个)查询5条(即5条语句)。
show binlog events in 'mysql-bin.000108' from 391 limit 2,5\G



具体恢复数据请查看八、MySQL备份与数据恢复-CSDN博客

5、删除二进制日志

        MySQL的二进制文件可以配置自动删除,同时MySQL也提供了安全的手动删除二进制文件的方法。PURGE MASTER LOGS只删除指定部分的二进制日志文件,RESET MASTER删除所有的二进制日志文件。具体如下:

(1)purge master logs 删除指定日志文件

语法:
PURGE {MASTER | BINARY} LOGS TO ‘指定日志文件名’
PURGE {MASTER | BINARY} LOGS BEFORE ‘指定日期’
示例:
1、使用PURGE MASTER LOGS语句删除创建时间比mysql-bin.000101早的所有日志
PURGE MASTER LOGS T0 "mysql-bin.000101";
2、使用PURGE MASTER LOGS语句删除2023年10月21日前创建的所有日志文件。
    1、显示二进制日志文件列表
    show binary logs;
    2、执行mysqlbinlog 命令查看二进制日志文件mysql-bin.000101 的内容
    mysqlbinlog --no-defaults "/var/lib/mysql/mysql-bin.000101"
    3、删除
    purge master logs before "20221021";

(2)删除所有

reset master;

总结:

        binlog与redolog区别:

  • redo log 它是物理日志,记录内容是“在某个数据页上做了什么修改”,属于 InnoDB 存储引擎层产生的。
  • 而 binlog 是逻辑日志,记录内容是语句的原始逻辑,类似于“给 ID=2 这一行的 c 字段加 1”,属于MySQL Server 层
  • 虽然它们都属于持久化的保证,但是则重点不同。
    • redo log让InnoDB存储引擎拥有了崩溃恢复能力。
    • binlog保证了MySQL集群架构的数据一致性。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1551710.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

【JavaWeb】Day23.maven——依赖管理

依赖管理 一.依赖配置 依赖:指当前项目运行所需要的jar包。一个项目中可以引入多个依赖。 例如:在当前工程中,我们需要用到logback来记录日志,此时就可以在maven工程的pom.xml文件中,引入logback的依赖。具体步骤如…

docker容器内存检测排查

查询容器使用内存 在运维当中,你会发现内存很彪的高,但是如何判断为什么会高,是什么样的程序造成的呢?赶快使用 top,或者 free -h或者 ps -v。是吗?道理是对的。 但是你会发现,全部都是docker…

探索Python人工智能在气象监测中的创新应用

Python是功能强大、免费、开源,实现面向对象的编程语言,在数据处理、科学计算、数学建模、数据挖掘和数据可视化方面具备优异的性能,这些优势使得Python在气象、海洋、地理、气候、水文和生态等地学领域的科研和工程项目中得到广泛应用。可以…

linux网络服务学习(4):SAMBA

1.什么是SAMBA SAMBA也是一种文件共享工具 (1)服务名:smb (2)软件名:samba (3)配置文件: /etc/samba/smb.conf /etc/samba/smb.conf.example (4&#…

牛客NC26 括号生成【中等 递归 Java,Go,PHP】

题目 题目链接: https://www.nowcoder.com/practice/c9addb265cdf4cdd92c092c655d164ca 思路 答案链接:https://www.lintcode.com/problem/427/solution/16924 参考答案Java import java.util.*;public class Solution {/*** 代码中的类名、方法名、参…

#Linux(make工具和makefile文件以及makefile语法)

(一)发行版:Ubuntu16.04.7 (二)记录: (1)make为编译辅助工具,解决用命令编译工程非常繁琐的问题 (2)在终端键入make即可调用make工具&#xff0…

学习JavaEE的日子 Day29 yield,join,线程的中断,守护线程,线程局部变量共享,线程生命周期

Day29 多线程 12. 线程的礼让 Thread.yield(); 理解:此方法为静态方法,此方法写在哪个线程中,哪个线程就礼让 注意:所谓的礼让是指当前线程退出CPU资源,并转到就绪状态,接着再抢 需求:创建两个…

P8764 [蓝桥杯 2021 国 BC] 二进制问题

很板的一道题目&#xff0c;注意就是数组别开的太小 #include<bits/stdc.h> using namespace std; using ll long long; using pii pair<int,int>; #define int long long const int N 1e510; const int inf 0x3f3f3f3f; const int mod 1e97; int gcd(int a,…

【81-100】计算机网络基础知识(非常详细)从零基础入门到精通,看完这一篇就够了

【81-100】计算机网络基础知识&#xff08;非常详细&#xff09;从零基础入门到精通&#xff0c;看完这一篇就够了 以下是本文参考的资料 欢迎大家查收原版 本版本仅作个人笔记使用81、对于FIN_WAIT_2&#xff0c;CLOSE_WAIT状态和TIME_WAIT状态&#xff1f;你知道多少?82、你…

算法第三十四天-有效数独

有效数独 题目要求 解题思路 一个简单的方法是&#xff0c;遍历9*9书读三次&#xff0c;以确保&#xff1a; 行中没有重复的数字列中没有重复的数字3*3子数独中没有重复的数字 但是&#xff0c;实际上&#xff0c;所有的一切都以可以在一次迭代中完成 可以使用box_index (r…

Kubernetes Gateway API 介绍

Kubernetes Gateway API 诞生背景 在 kubernetes 中&#xff0c;流量的治理主要分为两个部分&#xff1a; 南北向流量东西向流量 南北向流量&#xff08;NORTH-SOUTH traffic&#xff09; 在计算机网络中&#xff0c;南北向流量通常指数据流量从一个**内部网络&#xff08;…

20231911马星 2022-2023-2 《网络攻防实践》实验四

1.实践内容 在网络攻防实验环境中完成TCP/IP协议栈重点协议的攻击实验&#xff0c;包括ARP缓存欺骗攻击、ICMP重定向攻击、SYN Flood攻击、TCP RST攻击、TCP会话劫持攻击。 1.1 ARP欺骗攻击&#xff1a; &#xff08;1&#xff09;ARP欺骗&#xff08;ARP spoofing&#xff09…

【算法-PID】

算法-PID ■ PID■ 闭环原理■ PID 控制流程■ PID 比例环节&#xff08; Proportion&#xff09;■ PID 积分环节&#xff08;Integral&#xff09;■ PID 微分环节&#xff08;Differential&#xff09; ■ PID PID 分别是 Proportion&#xff08;比例&#xff09;、 Integr…

如何购买小程序模板开发企业小程序

在当今数字化时代&#xff0c;小程序已成为企业展示与营销的重要工具。购买一个小程序模板&#xff0c;来快速上线自己的企业小程序&#xff0c;已成为当前最流行且性价比最高的开发方式。 乔拓云网站提供了丰富的小程序模板资源&#xff0c;无论你需要哪种风格或功能的小程序&…

WOT全球技术创新大会2024北京站:技术派与市场派共话AIGC新未来

WOT全球技术创新大会2024将在北京盛大开幕&#xff0c;聚焦AIGC时代的软件工程新范式、AI Agent探索与应用、多模态AIGC前沿探索以及大模型部署与应用等核心议题。此次大会将促进技术信仰派与市场信仰派间的深度对话与交流&#xff0c;共同探讨AIGC技术的未来发展方向。 在过去…

【Java程序设计】【C00351】基于Springboot的疫情居家办公系统(有论文)

基于Springboot的疫情居家办公系统&#xff08;有论文&#xff09; 项目简介项目获取开发环境项目技术运行截图 项目简介 项目获取 &#x1f345;文末点击卡片获取源码&#x1f345; 开发环境 运行环境&#xff1a;推荐jdk1.8&#xff1b; 开发工具&#xff1a;eclipse以及i…

Flask python 开发篇:上传文件(在指定目录下创建文件夹)

flask上传文件以及常见问题 一、flask文档上传文件的介绍二、上传文件的实现2.1、生成一个from表单&#xff0c;用来提交图片2.2、编写上传的逻辑 三、运行代码、以及常见异常四、写在最后 一、flask文档上传文件的介绍 Flask上传文件的文档介绍&#xff0c;文件上传的基本思想…

快递鸟物流轨迹地图API接口,包裹行程尽在掌握!

在快节奏的现代生活中&#xff0c;物流行业作为连接生产者与消费者的桥梁&#xff0c;其重要性不言而喻。随着电子商务的飞速发展&#xff0c;人们对物流信息的实时性和准确性要求越来越高。为了满足这一需求&#xff0c;快递鸟物流轨迹地图API应运而生&#xff0c;为广大用户提…

WIFI驱动移植实验: wireless tools 工具测试

一. 简介 前面一篇文章交叉编译了 wireless tools 工具&#xff0c;并移植到开发板文件系统上。文章如下&#xff1a; WIFI驱动移植实验&#xff1a; wireless tools 工具移植-CSDN博客 本文对 所移植的操作 WIFI设备的工具 wireless tools进行测试。确认是否可以使用。 二…

【浅尝C++】使用模板实现泛型编程第一弹=>函数模板/类模板/模板匹配原则/函数模板原理

&#x1f3e0;专栏介绍&#xff1a;浅尝C专栏是用于记录C语法基础、STL及内存剖析等。 &#x1f6a9;一些备注&#xff1a;之前的文章有点杂乱&#xff0c;这里将前面的知识点重新组织了&#xff0c;避免了过多冗余的废话。 &#x1f3af;每日努力一点点&#xff0c;技术变化看…