Mysql主从复制

介绍

MySQL主从复制是一个异步的复制过程，底层是基于Mysql数据库自带的二进制日志功能。就是一台或多台MySQL数据库(slave，即从库)从另一台MySQL数据库(master，即主库)进行日志的复制然后再解析日志并应用到自身，最终实现从库的数据和主库的数据保持一致。MySQL主从复制是MySQL数据库自带功能，无需借助第三方工具。

MySOL复制过程分成三步:

1. master将改变记录到二进制日志(binary log)
2. slave将master的binary log拷贝到它的中继日志(relay log)
3. slave重做中继日志中的事件，将改变应用到自己的数据库中

配置

主库Master

1. 修改mysql数据库的配置文件

   vim /etc/my.cnf[mysqld]
   log-bin=mysql-bin # [必须]启动二进制日志
   server-id=100     # [必须]服务器唯一ID
   

2. 重启mysql服务

   systemctl restart mysqld
   

3. 登录数据库, 创建权限用户

   grant replication slave on *.* to 'cen'@'%' identified by 'Root@12346';
   

4. 登录数据库, 执行sql, 记录file和position

   show master status;
   

   
   注意: 上面sql的作用是查看master的状态, 执行完此sql后不要再执行任何操作

从库Slave

1. 修改mysql数据库的配置文件

   vim /etc/my.cnf[mysqld]
   server-id=101     # [必须]服务器唯一ID
   

2. 重启mysql服务

   systemctl restart mysqld
   

3. 登录mysql, 执行sql

   // 根据主库的第四步
   change master to master_host='192.168.174.133',master_user='cen',master_password='Root@12346',master_log_file='mysql-bin.000002',master_log_pos=154;start slave;
   

   注意: 主库创建用户时密码少打了个5…
4. 登录数据库, 执行sql

   show slave status\G;
   // 出现以下两行说明配置成功
   Slave_IO_Running: Yes
   Slave_SQL_Running: Yes
   

读写分离案例

背景

面对日益增加的系统访问量，数据库的吞吐量面临着巨大瓶颈。对于同一时刻有大量并发读操作和较少写操作类型的应用系统来说，将数据库拆分为主库和从库，主库负责处理事务性的增删改操作，从库负责处理查询操作，能够有效的避免由数据更新导致的行锁，使得整个系统的查询性能得到极大的改善。

Sharding-JDBC介绍

Sharding-JDBC定位为轻量级Java框架，在Java的JDBC层提供的额外服务。它使用客户端直连数据库，以jar包形式提供服务，无需额外部署和依赖，可理解为增强版的JDBC驱动，完全兼容JDBC和各种ORM框架使用sharding-JDBC可以在程序中轻松的实现数据库读写分离.

• 适用于任何基于JDBC的ORM框架，如: JPA,Hibernate,Mybatis, Spring JDBC Template或直接使用JDBC。
• 支持任何第三方的数据库连接池，如: DBCP,C3PO,Bonecp,Druid,HikariCP等。
• 支持任意实现JDBC规范的数据库。目前支持MySQL，Oracle，SQLServer，PostgreSQL以及任何遵循SQL92标准的数据库。

入门案例

1. 导入maven坐标

   <dependency><groupId>org.apache.shardingsphere</groupId><artifactId>sharding-jdbc-spring-boot-starter</artifactId><version>4.0.0-RC1</version>
   </dependency>
   

2. 在配置文件中配置读写分离规则

   spring:shardingsphere:datasource:names:master,slave# 主数据源master:type: com.alibaba.druid.pool.DruidDataSourcedriver-class-name: com.mysql.cj.jdbc.Driverurl: jdbc:mysql://192.168.174.133:3306/rw?characterEncoding=utf-8&useSSL=falseusername: rootpassword: root# 从数据源slave:type: com.alibaba.druid.pool.DruidDataSourcedriver-class-name: com.mysql.cj.jdbc.Driverurl: jdbc:mysql://192.168.174.134:3306/rw?characterEncoding=utf-8&useSSL=falseusername: rootpassword: rootmasterslave:# 读写分离配置load-balance-algorithm-type: round_robin # 轮询# 最终的数据源名称name: dataSource# 主库数据源名称master-data-source-name: master# 从库数据源名称列表，多个逗号分隔slave-data-source-names: slaveprops:sql:show: true #开启SQL显示，默认false
   

   注: 如果配置中数据库的配置会报红, 没有关系
3. 在配置文件中配置允许bean定义覆盖配置项

   spring:main:allow-bean-definition-overriding: true # 允许bean定义覆盖
   

Nginx

概述

介绍

Nginx是一款轻量级的web 服务器/反向代理服务器及电子邮件(IMAP/POP3)代理服务器。其特点是占有内存少，并发能力强，事实上nginx的并发能力在同类型的网页服务器中表现较好，中国大陆使用nginx的网站有: 百度、京东新浪、网易、腾讯、淘宝等。
Nginx是由伊戈尔·赛索耶夫为俄罗斯访问量第二的Rambler.ru站点开发的，第一个公开版本0.1.0发布于2094年10月4日。

下载安装

1. 安装依赖包: yum -y install gcc pcre-devel zlib-devel openssl openssl-devel
2. 下载Nginx安装包: wget https://nginx.org/download/nginx-1.24.0.tar.gz
3. 解压: tar -zxvf nginx-1.24.0.tar.gz
4. 切换目录: cd nginx-1.24.0
5. 创建目录: mkdir -p /usr/local/nginx
6. ./configure --prefix=/usr/local/nginx
7. make && make install

目录结构

• conf/nginx.conf: nginx配置文件
• html: 存放静态文件(html, css, js等)
• logs: 日志目录, 存放日志文件
• sbin/nginx: 二进制文件, 用于启动, 停止nginx服务

小工具: yum install tree

命令

• 查看版本: ./nginx -v
• 检查配置文件正确性: ./nginx -t
• 启动Nginx服务: ./nginx
• 停止Nginx服务: ./nginx -s stop
• 重新加载配置文件(修改nginx配置文件后, 需要重新加载): ./nginx -s reload

配置nginx环境变量

vim /etc/profile// 配置环境变量
PATH=/usr/local/nginx/sbin:source /etc/profile

配置文件结构

Nginx配置文件(conf/nginx.conf)整体分为三部分

• 全局块: 和Nginx运行相关的全局配置
• events块: 和网络连接相关的配置
• http块: 代理, 缓存, 日志记录, 虚拟主机配置
  • http全局块
  • Server块
    • Server全局块
    • location块

注: http块中可以配置多个Server块, 每个Server块中可以配置多个location块.

具体应用

部署静态资源

Nginx可以作为静态web服务器来部署静态资源。静态资源指在服务端真实存在并且能够直接展示的一些文件，比如常见的html页面、css文件、js文件、图片、视频等资源。相对于Tomcat，Nginx处理静态资源的能力更加高效，所以在生产环境下，一般都会将静态资源部署到Nginx中。将静态资源部署到Nginx非常简单，只需要将文件复制到Nginx安装目录下的html目录中即可。

server{listen 80; # 监听端口server_name localhost; # 服务器名称location / { # 匹配客户端请求urlroot html; # 指定静态资源根目录index index.html; # 指定默认首页}
}

反向代理

• 正向代理
  是一个位于客户端和原始服务器(origin server)之间的服务器，为了从原始服务器取得内容，客户端向代理发送一个请求并指定目标(原始服务器)，然后代理向原始服务器转交请求并将获得的内容返回给客户端。正向代理的典型用途是为在防火墙内的局域网客户端提供访问internet的途径。
  正向代理一般是在客户端设置代理服务器，通过代理服务器转发请求，最终访问到目标服务器.
  
• 反向代理
  反向代理服务器位于用户与目标服务器之间，但是对于用户而言，反向代理服务器就相当于目标服务器，即用户直接访问反向代理服务器就可以获得目标服务器的资源，反向代理服务器负责将请求转发给目标服务器。
  用户不需要知道目标服务器的地址，也无须在用户端作任何设定。
  
• 配置反向代理

  server {listen 82;server_name localhost;location / {# 反向代理配置, 将请求转发到指定服务器proxy_pass http://192.168.174.134:8080;}
  }
  

负载均衡

早期的网站流量和业务功能都比较简单，单台服务器就可以满足基本需求，但是随着互联网的发展，业务流量越来越大并且业务逻辑也越来越复杂，单台服务器的性能及单点故障问题就凸显出来了，因此需要多台服务器组成应用集群进行性能的水平扩展以及避免单点故障出现.

• 应用集群: 将同一应用部署到多台机器上，组成应用集群，接收负载均衡器分发的请求，进行业务处理并返回响应数据.
• 负载均衡器: 将用户请求根据对应的负载均衡算法分发到应用集群中的一台服务器进行处理.
• 配置负载均衡

  # upstream指令可以定义一组服务器
  upstream targetserver {server 192.168.174.134:8080;server 192.168.174.134:8081;
  }server {listen 8080;server_name localhost;location / {proxy_pass http://targetserver;}
  }
  

• 负载均衡策略

  名称	说明
  轮询	默认方式
  weight	权重方式
  ip_hash	依据ip分配方式
  least_conn	依据最少连接方式
  url_hash	依据url分配方式
  fair	依据响应时间方式

来源

黑马程序员. 瑞吉外卖项目