MySQL主从同步
- MySQL主从同步原理
- 一主多从配置
- 准备主服务器
- 创建文件夹
- 创建docker-compose-mysql.yml文件
- 准备从服务器
- 启动主从同步
- 搭建3508 步骤和3507一样
- 启动主从同步
- 实现主从同步
- 停止和重置
- 常见问题
MySQL主从同步原理
基本原理:
slave会从master读取binlog来进行数据同步
具体步骤:
step1:
master将数据改变记录到二进制日志(binary log)
中。step2:
当slave上执行start slave
命令之后,slave会创建一个IO 线程
用来连接master,请求master中的binlog。step3:
当slave连接master时,master会创建一个log dump 线程
,用于发送 binlog 的内容。在读取 binlog 的内容的操作中,会对主节点上的 binlog 加锁,当读取完成并发送给从服务器后解锁。step4:
IO 线程接收主节点 binlog dump 进程发来的更新之后,保存到中继日志(relay log)
中。- step5:
slave的
SQL线程`,读取relay log日志,并解析成具体操作,从而实现主从操作一致,最终数据一致。
一主多从配置
服务器规划:使用docker
方式创建,主从服务器IP一致,端口号不一致
- 主服务器:容器名
lx-mysql-master
,端口3506
- 从服务器:容器名
lx-mysql-slave1
,端口3507
- 从服务器:容器名
lx-mysql-slave2
,端口3508
注意 如果此时防火墙是开启的,则先关闭防火墙,并重启docker
,否则后续安装的MySQL无法启动
安装docker连接
#关闭docker
systemctl stop docker
#关闭防火墙
systemctl stop firewalld
#启动docker
systemctl start docker
准备主服务器
创建文件夹
mkdir -p /lx/mysql/master/data
mkdir -p /lx/mysql/master/conf
mkdir -p /lx/mysql/slave1/conf
mkdir -p /lx/mysql/slave2/conf
mkdir -p /lx/mysql/slave1/data
mkdir -p /lx/mysql/slave2/data
创建docker-compose-mysql.yml文件
version: '3'
services:lx-mysql-master:image: mysql:8.0.29restart: alwaysenvironment:MYSQL_ROOT_PASSWORD: 123456MYSQL_PASSWORD: 123456ports:- 3506:3306volumes:- "/lx/mysql/master/conf:/etc/mysql/conf.d"- "/lx/mysql/master/data:/var/lib/mysql"container_name: "lx-mysql-master"lx-mysql-slave1:image: mysql:8.0.29environment:MYSQL_ROOT_PASSWORD: 123456MYSQL_PASSWORD: 123456ports:- 3507:3306volumes:- "/lx/mysql/slave1/conf:/etc/mysql/conf.d"- "/lx/mysql/slave1/data:/var/lib/mysql"container_name: "lx-mysql-slave1"lx-mysql-slave2:image: mysql:8.0.29environment:MYSQL_ROOT_PASSWORD: 123456MYSQL_PASSWORD: 123456ports:- 3508:3306volumes:- "/lx/mysql/slave2/conf:/etc/mysql/conf.d"- "/lx/mysql/slave2/data:/var/lib/mysql"container_name: "lx-mysql-slave2"
step2:创建MySQL主服务器配置文件:
默认情况下MySQL的binlog日志是自动开启的,可以通过如下配置定义一些可选配置
vim /lx/mysql/master/conf/my.cnf
配置如下内容
[mysqld]
# 服务器唯一id,默认值1
server-id=1
# 设置日志格式,默认值ROW
binlog_format=STATEMENT
# 二进制日志名,默认binlog
# log-bin=binlog
# 设置需要复制的数据库,默认复制全部数据库
#binlog-do-db=mytestdb
# 设置不需要复制的数据库
#binlog-ignore-db=mysql
#binlog-ignore-db=infomation_schema
使用docker-compose启动主机
docker-compose -f docker-compose-mysql.yml up -d lx-mysql-master
binlog格式说明:
- binlog_format=STATEMENT:日志记录的是主机数据库的
写指令
,性能高,但是now()之类的函数以及获取系统参数的操作会出现主从数据不同步的问题。 - binlog_format=ROW(默认):日志记录的是主机数据库的
写后的数据
,批量操作时性能较差,解决now()或者 user()或者 @@hostname 等操作在主从机器上不一致的问题。 - binlog_format=MIXED:是以上两种level的混合使用,有函数用ROW,没函数用STATEMENT,但是无法识别系统变量
binlog-ignore-db和binlog-do-db的优先级问题:
step3:使用命令行登录MySQL主服务器:
#进入容器:env LANG=C.UTF-8 避免容器中显示中文乱码
docker exec -it lx-mysql-master env LANG=C.UTF-8 /bin/bash
#进入容器内的mysql命令行
mysql -uroot -p
#修改默认密码校验方式
ALTER USER 'root'@'%' IDENTIFIED WITH mysql_native_password BY '123456';
step4:主机中创建slave用户:用于从机向主机拉取日志的账号
-- 创建slave用户
CREATE USER 'lx_slave'@'%';
-- 设置密码
ALTER USER 'lx_slave'@'%' IDENTIFIED WITH mysql_native_password BY '123456';
-- 授予复制权限
GRANT REPLICATION SLAVE ON *.* TO 'lx_slave'@'%';
-- 刷新权限
FLUSH PRIVILEGES;
step5:主机中查询master状态:
执行完此步骤后不要再操作主服务器MYSQL
,防止主服务器状态值变化
SHOW MASTER STATUS;
记下File
和Position
的值。执行完此步骤后不要再操作主服务器MYSQL,防止主服务器状态值变化。
准备从服务器
可以配置多台从机slave1、slave2…,这里以配置slave1为例
step1:创建MySQL从服务器配置文件:
配置如下内容:
[mysqld]
# 服务器唯一id,每台服务器的id必须不同,如果配置其他从机,注意修改id
server-id=2
# 中继日志名,默认xxxxxxxxxxxx-relay-bin
#relay-log=relay-bin
vim /lx/mysql/slave1/conf/my.cnf
step2:在docker中创建并启动MySQL从服务器:端口3507
docker-compose -f docker-compose-mysql.yml up -d lx-mysql-slave1
**step3:使用命令行登录MySQL从服务器:
#进入容器:
docker exec -it lx-mysql-slave1 env LANG=C.UTF-8 /bin/bash
#进入容器内的mysql命令行
mysql -uroot -p
#修改默认密码校验方式
ALTER USER 'root'@'%' IDENTIFIED WITH mysql_native_password BY '123456';
step4:在从机上配置主从关系:
在从机上执行以下SQL操作
CHANGE MASTER TO MASTER_HOST='192.168.254.128',
MASTER_USER='lx_slave',MASTER_PASSWORD='123456', MASTER_PORT=3506,
MASTER_LOG_FILE='binlog.000006',MASTER_LOG_POS=1551;
启动主从同步
启动从机的复制功能,执行SQL:
START SLAVE;
-- 查看状态(不需要分号)
SHOW SLAVE STATUS\G
**两个关键进程:**下面两个参数都是Yes,则说明主从配置成功!
搭建3508 步骤和3507一样
step1:创建MySQL从服务器配置文件:
vim /lx/mysql/slave2/conf/my.cnf
内容如下
[mysqld]
# 服务器唯一id,每台服务器的id必须不同,如果配置其他从机,注意修改id
server-id=3
# 中继日志名,默认xxxxxxxxxxxx-relay-bin
#relay-log=relay-bin
step2:在docker中创建并启动MySQL从服务器:端口3508
docker-compose -f docker-compose-mysql.yml up -d lx-mysql-slave2
step3:使用命令行登录MySQL从服务器:
#进入容器:
docker exec -it lx-mysql-slave2 env LANG=C.UTF-8 /bin/bash
#进入容器内的mysql命令行
mysql -uroot -p
#修改默认密码校验方式
ALTER USER 'root'@'%' IDENTIFIED WITH mysql_native_password BY '123456';
step4:在从机上配置主从关系:
CHANGE MASTER TO MASTER_HOST='192.168.254.128',
MASTER_USER='lx_slave',MASTER_PASSWORD='123456', MASTER_PORT=3506,
MASTER_LOG_FILE='binlog.000006',MASTER_LOG_POS=1551;
启动主从同步
启动从机的复制功能,执行SQL:
START SLAVE;-- 查看状态(不需要分号)
SHOW SLAVE STATUS\G
下面两个参数都是Yes,则说明主从配置成功!
实现主从同步
在主机中执行以下SQL,在从机3506中查看数据库、表和数据是否已经被同步
CREATE DATABASE db_user;
USE db_user;
CREATE TABLE t_user (id BIGINT AUTO_INCREMENT,uname VARCHAR(30),PRIMARY KEY (id)
);
INSERT INTO t_user(uname) VALUES('zhang3');
INSERT INTO t_user(uname) VALUES(@@hostname);
停止和重置
需要的时候,可以使用如下SQL语句
-- 在从机上执行。功能说明:停止I/O 线程和SQL线程的操作。
stop slave; -- 在从机上执行。功能说明:用于删除SLAVE数据库的relaylog日志文件,并重新启用新的relaylog文件。
reset slave;-- 在主机上执行。功能说明:删除所有的binglog日志文件,并将日志索引文件清空,重新开始所有新的日志文件。
-- 用于第一次进行搭建主从库时,进行主库binlog初始化工作;
reset master;
常见问题
启动主从同步后,常见错误是Slave_IO_Running: No 或者 Connecting
的情况,此时查看下方的 Last_IO_ERROR
错误日志,根据日志中显示的错误信息在网上搜索解决方案即可
可关注公众号 佳哇程序员
或直接扫码关注