MySQL--》日志与主从复制的实战技巧

devtools/2025/2/6 21:13:40/

目录

日志

错误日志

二进制日志

查询日志

慢查询日志

主从复制


日志

日志:是记录数据库操作和事务的文件,主要用于帮助数据库管理员(DBA)跟踪、恢复数据以及进行故障排查,日志是MySQL数据库管理中非常重要的一部分,常见的日志类型有以下几种:

错误日志

记录了当mysql启动或停止时以及服务器在运行过程中发生任何严重错误时的相关信息,当数据库出现任何故障导致无法正常使用时,建议首先查看此日志

日志是默认开启的,默认存放目录/var/log/,默认的日志文件名为mysql.log,查看日志位置命令如下所示:

show variables like '%log_error%'

执行如上命令之后可以看到我们查询到了当前的错误日志的文件目录,如下:

这里我们可以复制错误日志的目录,通过如下命令可以查询错误日志目录当中的前(后)50条数据:

-- linux系统下操作
head -n 50 /var/log/mysql/error.log -- 查看文件的前50条记录
tail -n 50 /var/log/mysql/error.log -- 查看错误日志文件的最后50条记录

二进制日志

记录了所有的DDL(数据定义语言)语句和DML(数据操纵语言)语句,但不包括数据查询(select、show)语句,其作用主要包括:1)灾难时的数据恢复;2)MySQL的主从复制

在MySQL8版本中默认二进制日志是开启着的,其涉及的参数如下所示:

show variables like '%log_bin%'

执行如上命令之后可以看到我们查询到了当前的二进制日志的文件信息,如下: 

MySQL服务器中提供了多种格式来记录二进制日志,具体格式及特点如下所示:

日志格式含义
statement基于SQL语句的日志记录,记录的是SQL语句,对数据进行修改的SQL都会记录在日志文件中
row基于行的日志记录,记录的是每一行的数据变更(默认)
mixed混合了statement和row两种格式,默认采用statement,在某些特殊情况下会自动切换为row进行记录

我们可以通过如下命令进行查询当前的MySQL使用的二进制的日志格式是哪种:

show variables like '%binlog_format%';

由于日志是以二进制方式存储的,不能直接读取,需要通过二进制日志查询工具mysqlbinlog来查看,其使用命令如下所示:

// 参数选项
// -d:指定数据库名称,只列出指定的数据库相关操作
// -o:忽略掉日志中的前n行命令
// -v:将行事件(数据变更)重构为SQL语句
// -w:将行事件(数据变更)重构为SQL语句,并输出注释信息
mysqlbinlog [参数选项] log的文件名称

对于比较繁忙的业务系统,每天生成的binlog数据巨大,如果长时间不清楚将会占用大量磁盘空间,可以通过如下几种方式进行日志的清理:

指令含义
reset master删除全部binlog日志,删除之后日志编号将从binlog.00001重新开始
purge master logs to 'binlog.***'删除****编号之前的所有日志
purge master logs before 'yyyy-mm-dd hh:mi:ss'删除日志为'yyyy-mm-dd hh:mi:ss'之前产生的所有日志

当然我们也可以在mysql的配置文件中配置二进制日志的过期时间,设置了之后二进制日志过期会自动删除,如下所示:

show variabels like '%binlog_expire_logs_seconds%';

查询日志

记录了客户端的所有操作语句,而二进制日志不包含查询数据的SQL语句,默认情况下查询日志是未开启的,如果需要开启查询日志可以设置以下配置:

show variables like '%general%';

修改MySQL的配置文件/etc/my.cnf文件,添加如下内容:

#该选项用来开启查询日志,可选值:0或者1;0代表关闭,1代表开启
general _log=1#设置日志的文件名,如果没有指定,默认的文件名为host_name.log
general_log_file=mysql_query.log

慢查询日志

记录了所有执行时间超过参数long_query_time设置值并且扫描记录数不小于 min_examined_row_limit的所有的SQL语句的日志,默认未开启。long_query_time默认为 10秒,最小为0,精度可以到微秒,其配置命令如下所示:

# 慢查询日志
show_query_log=1# 执行时间参数
long_query_time=2

默认情况下慢查询日志不会记录管理语句,也不会记录不使用索引进行查找的查询,可以使log_slow_admin_statements和更改此行为log_queries_not_using_indexes,如下所述:

#记录执行较慢的管理语句
log_slow_admin_statements = 1#记录执行较慢的未使用索引的语句
log_queries_not_using_indexes = 1

主从复制

主从复制:是指将主数据库的DDL和DML操作通过二进制日志传到从库服务器中,然后在从库上对这些日志重新执行(也叫重做),从而使得从库和主库的数据保持同步。MySQL支持一台主库同时向多台从库进行复制,从库同时也可以作为其他从服务器的主库,实现链状复制,如下图所示:

MySQL复制的有点主要包含以下三个方面:

1)主库出现问题,可以快速切换到从库提供服务

2)实现读写分离,降低主库的访问压力

3)可以在从库中执行备份,以避免备份期间影响主库服务

主从复制的原理如下所示,从下图来看,主从复制共分为三步:

1)Master主库在事务提交时,会把数据变更记录在二进制日志文件Binlog中。

2)从库读取主库的二进制日志文件Binlog,写入到从库的中继日志Relay Log。

3)slave重做中继日志中的事件,将改变反映它自己的数据。


http://www.ppmy.cn/devtools/156624.html

相关文章

C基础寒假练习(2)

一、输出3-100以内的完美数&#xff0c;(完美数&#xff1a;因子和(因子不包含自身)数本身 #include <stdio.h>// 函数声明 int isPerfectNumber(int num);int main() {printf("3-100以内的完美数有:\n");for (int i 3; i < 100; i){if (isPerfectNumber…

【NLP251】NLP RNN 系列网络

NLP251 系列主要记录从NLP基础网络结构到知识图谱的学习 &#xff11;.原理及网络结构 &#xff11;.&#xff11;&#xff32;&#xff2e;&#xff2e; 在Yoshua Bengio论文中( http://proceedings.mlr.press/v28/pascanu13.pdf )证明了梯度求导的一部分环节是一个指数模型…

日本工作面试基本礼仪-一篇梗概

面接の内容に加えて、エチケットも非常に重要です。日本のビジネス社会には独自のビジネスマナー&#xff08;ビジネスマナー[ビジネスマナー]&#xff09;があり、国際基準とは異なる場合がありますので、注意が必要です。 日本人、特に日本の伝統的な大企業の面接官は、一般…

熟练掌握Http协议

目录 基本概念请求数据Get请求方式和Post请求方式 响应数据响应状态码 基本概念 Http协议全称超文本传输协议(HyperText Transfer Protocol)&#xff0c;是网络通信中应用层的协议&#xff0c;规定了浏览器和web服务器数据传输的格式和规则 Http应用层协议具有以下特点&#…

【开源免费】基于SpringBoot+Vue.JS美食推荐商城(JAVA毕业设计)

本文项目编号 T 166 &#xff0c;文末自助获取源码 \color{red}{T166&#xff0c;文末自助获取源码} T166&#xff0c;文末自助获取源码 目录 一、系统介绍二、数据库设计三、配套教程3.1 启动教程3.2 讲解视频3.3 二次开发教程 四、功能截图五、文案资料5.1 选题背景5.2 国内…

如何开发一个大语言模型,开发流程及需要的专业知识

开发大型语言模型&#xff08;LLM&#xff09;是一个复杂且资源密集的过程&#xff0c;涉及多个阶段和跨学科知识。以下是详细的开发流程和所需专业知识指南&#xff1a; 一、开发流程 1. 需求分析与规划 目标定义&#xff1a;明确模型用途&#xff08;如对话、翻译、代码生成…

Kafka SSL(TLS)安全协议

文章目录 Kafka SSL&#xff08;TLS&#xff09;安全协议1. Kafka SSL 的作用1.1 数据加密1.2 身份认证1.3 数据完整性1.4 防止中间人攻击1.5 确保安全的分布式环境1.6 防止拒绝服务&#xff08;DoS&#xff09;攻击 2. Kafka SSL 配置步骤&#xff08;1&#xff09;创建 SSL 证…

FPGA|例化生成的PLL功能IP核

1、例化上一篇文章中调用的IP核&#xff0c;新建文件PLL_test.v 2、代码如图 timescale 1ns / 1ps module PLL_test(input clk,input rst_n,output clkout0,output clkout1,output clkout2,output clkout3,output clkout4);wire locked;PLL pll_inst(.inclk0(clk),.c0(clkout0)…