目录
- 前言
- 一、读写分离概述
- 1. 什么是读写分离?
- 2. 为什么要读写分离呢?
- 3. 什么时候要读写分离?
- 4. 主从复制与读写分离
- 5. mysq支持的复制类型
- 6. 主从复制的工作过程
- 7. MySQL主从复制延迟
- 二、主从复制配置方法
前言
在实际的生产环境中,对数据库的读和写都在同一个数据库服务器中,是不能满足实际需求的。无论是在安全性、高可用性还是高并发等各个方面都是完全不能满足实际需求的。因此,通过主从复制的方式来同步数据,再通过读写分离来提升数据库的并发负载能力。有点类似于rsync,但是不同的是rsync是对磁盘文件做备份,而mysql主从复制是对数据库中的数据、语句做备份。
一、读写分离概述
1. 什么是读写分离?
- 读写分离,基本的原理是让主数据库处理事务性增、改、删操作(INSERT、UPDATE、DELETE),而从数据库处理SELECT查询操作。
- 数据库复制被用来把事务性操作导致的变更同步到集群中的从数据库。
2. 为什么要读写分离呢?
- 因为数据库的“写”(写10000条数据可能要3分钟)操作是比较耗时的。
- 但是数据库的“读”(读10000条数据可能只要5秒钟)。
- 所以读写分离,解决的是,数据库的写入,影响了查询的效率。
3. 什么时候要读写分离?
- 数据库不一定要读写分离,如果程序使用数据库较多时,而更新少,查询多的情况下会考虑使用。
- 利用数据库主从同步,再通过读写分离可以分担数据库压力,提高性能。
4. 主从复制与读写分离
- 在实际的生产环境中,对数据库的读和写都在同一个数据库服务器中,是不能满足实际需求的。无论是在安全性、高可用性还是高并发等各个方面都是完全不能满足实际需求的。
- 因此,通过主从复制的方式来同步数据,再通过读写分离来提升数据库的并发负载能力。
- 有点类似于rsync,但是不同的是rsync是对磁盘文件做备份,而mysql主从复制是对数据库中的数据、语句做备份。
5. mysq支持的复制类型
- (1)STATEMENT:基于语句的复制。在服务器上执行sql语句,在从服务器上执行同样的语句,mysql默认采用基于语句的复制,执行效率高。
- (2)ROW:基于行的复制。把改变的内容复制过去,而不是把命令在从服务器上执行一遍。
- (3)MIXED:混合类型的复制。默认采用基于语句的复制,一旦发现基于语句无法精确复制时,就会采用基于行的复制。
6. 主从复制的工作过程
- (1)Master节点将数据的改变记录成二进制日志(bin log),当Master上的数据发生改变时,则将其改变写入二进制日志中。
- (2)Slave节点会在一定时间间隔内对Master的二进制日志进行探测其是否发生改变,如果发生改变,则开始一个I/O线程请求 Master的二进制事件。
- (3)同时Master节点为每个I/O线程启动一个dump线程,用于向其发送二进制事件,并保存至Slave节点本地的中继日志(Relay log)中,Slave节点将启动SQL线程从中继日志中读取二进制日志,在本地重放,即解析成 sql 语句逐一执行,使得其数据和 Master节点的保持一致,最后I/O线程和SQL线程将进入睡眠状态,等待下一次被唤醒。
注:
- 中继日志通常会位于 OS 缓存中,所以中继日志的开销很小。
- 复制过程有一个很重要的限制,即复制在 Slave上是串行化的,也就是说 Master上的并行更新操作不能在 Slave上并行操作。
7. MySQL主从复制延迟
发生MySQL主从复制延迟的几种原因
- master服务器高并发,形成大量事务
- 网络延迟
- 主从硬件设备导致
cpu主频、内存io、硬盘io - 本来就不是同步复制、而是异步复制
解决办法:
- 从库优化Mysql参数。比如增大innodb_buffer_pool_size,让更多操作在Mysql内存中完成,减少磁盘操作。
- 从库使用高性能主机。包括cpu强悍、内存加大。避免使用虚拟云主机,使用物理主机,这样提升了i/o方面性。
- 从库使用SSD磁盘
- 网络优化,避免跨机房实现同步
二、主从复制配置方法
- 首先做时间同步
rpm -q ntp ntpdate #首先确定安装这两个工具如果没有安装的话yum安装一下
yum -y install ntp ntpdate
vim /etc/ntp.conf ##ntp的配置文件
在主服务器配置文件里修改
从服务器直接 ntpdate 主机IP 同步主机的即可
需要注意
客户机要等几分钟再与新启动的 ntp 服务器进行时间同步,否则会提示 no server suitable for synchronization found 错误。
客户端同步时间
将时间同步命令放入计划任务内每30分钟执行一次同步
systemctl restart crond ##重启crond服务
主服务器 my.cnf 配置文件
重启服务然后登录mysql
在里面输入
从服务器配置
修改配置文件后重启服务器
然后登录mysql配置同步
start slave; #启动同步,如有报错执行 reset slave;
show slave status\G #查看 Slave 状态
#一般 Slave_IO_Running: No 的可能性:
1、网络不通
2、my.cnf配置有问题
3、密码、file文件名、pos偏移量不对
4、防火墙没有关闭