Sharding-JDBC一:MySQL主从复制搭建

MySQL主从同步

  • MySQL主从同步原理
  • 一主多从配置
    • 准备主服务器
    • 创建文件夹
    • 创建docker-compose-mysql.yml文件
    • 准备从服务器
    • 启动主从同步
      • 搭建3508 步骤和3507一样
    • 启动主从同步
      • 实现主从同步
      • 停止和重置
      • 常见问题

MySQL主从同步原理

在这里插入图片描述

基本原理:
slave会从master读取binlog来进行数据同步

具体步骤:

  • step1:master将数据改变记录到二进制日志(binary log)中。
  • step2: 当slave上执行 start slave 命令之后,slave会创建一个 IO 线程用来连接master,请求master中的binlog。
  • step3:当slave连接master时,master会创建一个 log dump 线程,用于发送 binlog 的内容。在读取 binlog 的内容的操作中,会对主节点上的 binlog 加锁,当读取完成并发送给从服务器后解锁。
  • step4:IO 线程接收主节点 binlog dump 进程发来的更新之后,保存到 中继日志(relay log) 中。
  • step5:slave的SQL线程`,读取relay log日志,并解析成具体操作,从而实现主从操作一致,最终数据一致。

一主多从配置

服务器规划:使用docker方式创建,主从服务器IP一致,端口号不一致
在这里插入图片描述

  • 主服务器:容器名lx-mysql-master,端口3506
  • 从服务器:容器名lx-mysql-slave1,端口3507
  • 从服务器:容器名lx-mysql-slave2,端口3508
    注意 如果此时防火墙是开启的,则先关闭防火墙,并重启docker,否则后续安装的MySQL无法启动

安装docker连接

#关闭docker
systemctl stop docker
#关闭防火墙
systemctl stop firewalld
#启动docker
systemctl start docker

准备主服务器

创建文件夹

mkdir -p /lx/mysql/master/data
mkdir -p /lx/mysql/master/conf
mkdir -p /lx/mysql/slave1/conf
mkdir -p /lx/mysql/slave2/conf
mkdir -p /lx/mysql/slave1/data
mkdir -p /lx/mysql/slave2/data

创建docker-compose-mysql.yml文件

version: '3'
services:lx-mysql-master:image: mysql:8.0.29restart: alwaysenvironment:MYSQL_ROOT_PASSWORD: 123456MYSQL_PASSWORD: 123456ports:- 3506:3306volumes:- "/lx/mysql/master/conf:/etc/mysql/conf.d"- "/lx/mysql/master/data:/var/lib/mysql"container_name: "lx-mysql-master"lx-mysql-slave1:image: mysql:8.0.29environment:MYSQL_ROOT_PASSWORD: 123456MYSQL_PASSWORD: 123456ports:- 3507:3306volumes:- "/lx/mysql/slave1/conf:/etc/mysql/conf.d"- "/lx/mysql/slave1/data:/var/lib/mysql"container_name: "lx-mysql-slave1"lx-mysql-slave2:image: mysql:8.0.29environment:MYSQL_ROOT_PASSWORD: 123456MYSQL_PASSWORD: 123456ports:- 3508:3306volumes:- "/lx/mysql/slave2/conf:/etc/mysql/conf.d"- "/lx/mysql/slave2/data:/var/lib/mysql"container_name: "lx-mysql-slave2"

step2:创建MySQL主服务器配置文件:
默认情况下MySQL的binlog日志是自动开启的,可以通过如下配置定义一些可选配置

vim /lx/mysql/master/conf/my.cnf

配置如下内容

[mysqld]
# 服务器唯一id,默认值1
server-id=1
# 设置日志格式,默认值ROW
binlog_format=STATEMENT
# 二进制日志名,默认binlog
# log-bin=binlog
# 设置需要复制的数据库,默认复制全部数据库
#binlog-do-db=mytestdb
# 设置不需要复制的数据库
#binlog-ignore-db=mysql
#binlog-ignore-db=infomation_schema

使用docker-compose启动主机

docker-compose -f docker-compose-mysql.yml up -d lx-mysql-master

binlog格式说明:

  • binlog_format=STATEMENT:日志记录的是主机数据库的写指令,性能高,但是now()之类的函数以及获取系统参数的操作会出现主从数据不同步的问题。
  • binlog_format=ROW(默认):日志记录的是主机数据库的写后的数据,批量操作时性能较差,解决now()或者 user()或者 @@hostname 等操作在主从机器上不一致的问题。
  • binlog_format=MIXED:是以上两种level的混合使用,有函数用ROW,没函数用STATEMENT,但是无法识别系统变量

binlog-ignore-db和binlog-do-db的优先级问题:
在这里插入图片描述
step3:使用命令行登录MySQL主服务器:

#进入容器:env LANG=C.UTF-8 避免容器中显示中文乱码
docker exec -it lx-mysql-master env LANG=C.UTF-8 /bin/bash
#进入容器内的mysql命令行
mysql -uroot -p
#修改默认密码校验方式
ALTER USER 'root'@'%' IDENTIFIED WITH mysql_native_password BY '123456';

step4:主机中创建slave用户:用于从机向主机拉取日志的账号

-- 创建slave用户
CREATE USER 'lx_slave'@'%';
-- 设置密码
ALTER USER 'lx_slave'@'%' IDENTIFIED WITH mysql_native_password BY '123456';
-- 授予复制权限
GRANT REPLICATION SLAVE ON *.* TO 'lx_slave'@'%';
-- 刷新权限
FLUSH PRIVILEGES;

step5:主机中查询master状态:
执行完此步骤后不要再操作主服务器MYSQL,防止主服务器状态值变化

SHOW MASTER STATUS;

记下FilePosition的值。执行完此步骤后不要再操作主服务器MYSQL,防止主服务器状态值变化。
在这里插入图片描述

准备从服务器

可以配置多台从机slave1、slave2…,这里以配置slave1为例

step1:创建MySQL从服务器配置文件:
配置如下内容:

[mysqld]
# 服务器唯一id,每台服务器的id必须不同,如果配置其他从机,注意修改id
server-id=2
# 中继日志名,默认xxxxxxxxxxxx-relay-bin
#relay-log=relay-bin
vim /lx/mysql/slave1/conf/my.cnf

step2:在docker中创建并启动MySQL从服务器:端口3507

 docker-compose -f docker-compose-mysql.yml up -d lx-mysql-slave1

**step3:使用命令行登录MySQL从服务器:

#进入容器:
docker exec -it lx-mysql-slave1 env LANG=C.UTF-8 /bin/bash
#进入容器内的mysql命令行
mysql -uroot -p
#修改默认密码校验方式
ALTER USER 'root'@'%' IDENTIFIED WITH mysql_native_password BY '123456';

step4:在从机上配置主从关系:
从机上执行以下SQL操作

CHANGE MASTER TO MASTER_HOST='192.168.254.128', 
MASTER_USER='lx_slave',MASTER_PASSWORD='123456', MASTER_PORT=3506,
MASTER_LOG_FILE='binlog.000006',MASTER_LOG_POS=1551; 

启动主从同步

启动从机的复制功能,执行SQL:

START SLAVE;
-- 查看状态(不需要分号)
SHOW SLAVE STATUS\G

**两个关键进程:**下面两个参数都是Yes,则说明主从配置成功!
在这里插入图片描述

搭建3508 步骤和3507一样

step1:创建MySQL从服务器配置文件:

vim /lx/mysql/slave2/conf/my.cnf

内容如下

[mysqld]
# 服务器唯一id,每台服务器的id必须不同,如果配置其他从机,注意修改id
server-id=3
# 中继日志名,默认xxxxxxxxxxxx-relay-bin
#relay-log=relay-bin

step2:在docker中创建并启动MySQL从服务器:端口3508

docker-compose -f docker-compose-mysql.yml up -d lx-mysql-slave2

step3:使用命令行登录MySQL从服务器:

#进入容器:
docker exec -it lx-mysql-slave2 env LANG=C.UTF-8 /bin/bash
#进入容器内的mysql命令行
mysql -uroot -p
#修改默认密码校验方式
ALTER USER 'root'@'%' IDENTIFIED WITH mysql_native_password BY '123456';

step4:在从机上配置主从关系:

CHANGE MASTER TO MASTER_HOST='192.168.254.128', 
MASTER_USER='lx_slave',MASTER_PASSWORD='123456', MASTER_PORT=3506,
MASTER_LOG_FILE='binlog.000006',MASTER_LOG_POS=1551;

启动主从同步

启动从机的复制功能,执行SQL:

START SLAVE;-- 查看状态(不需要分号)
SHOW SLAVE STATUS\G

下面两个参数都是Yes,则说明主从配置成功!
在这里插入图片描述

实现主从同步

在主机中执行以下SQL,在从机3506中查看数据库、表和数据是否已经被同步

CREATE DATABASE db_user;
USE db_user;
CREATE TABLE t_user (id BIGINT AUTO_INCREMENT,uname VARCHAR(30),PRIMARY KEY (id)
);
INSERT INTO t_user(uname) VALUES('zhang3');
INSERT INTO t_user(uname) VALUES(@@hostname);

停止和重置

需要的时候,可以使用如下SQL语句

-- 在从机上执行。功能说明:停止I/O 线程和SQL线程的操作。
stop slave; -- 在从机上执行。功能说明:用于删除SLAVE数据库的relaylog日志文件,并重新启用新的relaylog文件。
reset slave;-- 在主机上执行。功能说明:删除所有的binglog日志文件,并将日志索引文件清空,重新开始所有新的日志文件。
-- 用于第一次进行搭建主从库时,进行主库binlog初始化工作;
reset master;

常见问题

启动主从同步后,常见错误是Slave_IO_Running: No 或者 Connecting 的情况,此时查看下方的 Last_IO_ERROR错误日志,根据日志中显示的错误信息在网上搜索解决方案即可
可关注公众号 佳哇程序员
或直接扫码关注
在这里插入图片描述

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.hqwc.cn/news/688921.html

如若内容造成侵权/违法违规/事实不符,请联系编程知识网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

如何在Springboot项目的Mapper中增加一个新的sql语句

在做项目的过程中,我发现有的时候需要用到一些不在springboot的Mapper中的Sql语句,那么应该如何进行操作呐?? 平常我们创建springbootmybatisPlus项目的时候是这样创建的:: 1、创建实体类 2、创建Mappe…

Thread类的属性及常见方法

Thread是JVM用于管理线程的类,换句话说,每个线程都有一个Thread对象与之关联,一个Thread对象有ID、名称、优先级、状态等属性,JVM会将这些Thread对象组织起来,用于线程调度,线程管理。 1. Thread的常见构造…

Meilisearch使用过程趟过的坑

Elasticsearch 做为老牌搜索引擎,功能基本满足,但复杂,重量级,适合大数据量。 MeiliSearch 设计目标针对数据在 500GB 左右的搜索需求,极快,单文件,超轻量。 所以,对于中小型项目来说…

HashSet扩容机制

HashSet底层是HashMap,第一次添加的时候,table数组扩容到16,临界值是16*加载因子(默认是0.75),到达临界值进行扩容。 HashSet<Integer> hashSet = new HashSet<>();hashSet.add(5);hashSet.add(2);hashSet.add(5);hashSet.add(8);hashSet.add(1);当new一个H…

地磁暴红色预警来袭,普通人该如何应对?绝绝子的防护指南来了

近日&#xff0c;国家空间天气监测预警中心发布了一则令人瞩目的消息——地磁暴红色预警。这一预警不仅提醒我们地磁暴即将影响我国的电离层和低轨卫星&#xff0c;更让我们深刻认识到地球空间环境的脆弱性和复杂性。对于普通公众而言&#xff0c;地磁暴的概念可能相对陌生&…

OpenNJet,够轻更强云原生应用引擎

前言&#xff1a; 在正式介绍OpenNJet之前&#xff0c;我们先来看看它的技术架构&#xff0c;如下图所示&#xff0c;OpenNJet正是NGINX的Pro版&#xff0c;在100%兼容NGINX基础上&#xff0c;新增了动态配置加载、主动式健康检测、集群高可用、声明式API等多种强大功能。 NGIN…

鸿蒙DevEco Studio 4.1 Release-模拟器启动方式错误

软件版本&#xff1a;DevEco Studio 4.1 Release 报错提示&#xff1a; 没有权限查看处理指导 Size on Disk 显示1.0MB 尝试方案&#xff08;统统无效&#xff09;&#xff1a; 1、“windows虚拟机监控程序平台”、"虚拟机平台"已开启 启用CPU虚拟化 2、C…

InputStream,OutputStream的用法以及相应的案例

1. 文件系统的操作&#xff1a;File类。 2. 文件内容的操作&#xff1a;Stream流。 字符流&#xff1a;IntputStream &#xff0c; OutputStream。 字节流&#xff1a;read &#xff0c; write。 InputStream&#xff0c;OutputStream InputStream和OutputStream都不能被实例…

Acwing2024蓝桥杯FloodFill

AcWing 687. 扫雷 模拟以下样例(10X10): 把扫雷地图转变为数字记录的地图:地雷记作-1,其余表示8个方向有几个地雷,完成后如下图: 接着搜索所有0联通块(为红色矩形),并且把联通块附近不是地雷的点(红色圆形)全标记为-1,如下图: 而答案就是当前该图中大于0的数的数目之和,再加上…

深入理解JavaScript事件循环Event Loop:宏任务与微任务的奇幻之旅

&#x1f525; 个人主页&#xff1a;空白诗 文章目录 &#x1f389; 引言&#x1f31f; 什么是事件循环&#xff1f;&#x1f4da; 「宏任务」 vs 「微任务」「宏任务」(Macrotask)「微任务」(Microtask)实际应用中的注意事项 &#x1f500; 执行流程概览&#x1f4dd; 代码示例…

【数据结构】二叉树(Binary Tree)

文章目录 一、树的概念及结构二、二叉树的概念及结构1.二叉树的概念2.特殊的二叉树3.二叉树的性质 三、二叉树的存储顺序存储链式存储 四、二叉树的实现1.创建二叉树2.二叉树的遍历前序遍历中序遍历后序遍历层序遍历根据遍历顺序创建二叉树 3.二叉树的基本操作1.总结点个数2.二…

国内运营商选择爱立信,或因它的低频5G技术更先进,价格更便宜

国内某运营商将大笔5G设备订单交给爱立信&#xff0c;引发了掀然大波&#xff0c;影响仍在扩散&#xff0c;对此各方说什么原因都有&#xff0c;笔者认为爱立信此次斩获大单&#xff0c;可能在于它的低频5G设备更先进&#xff0c;价格更便宜&#xff0c;对于急于降低成本的国内…