八、AB复制

一、什么是主从复制?

1、主从复制
是用来建立一个和主数据库完全一样的数据库环境，称为从数据库；主数据库一般是准实时的业务数据库。
2、主从复制的作用

1.做数据的热备，作为后备数据库，主数据库服务器故障后，可切换到从数据库继续工作，避免数据丢失。
2.架构的扩展。业务量越来越大，I/O访问频率过高，单机无法满足，此时做多库的存储，降低磁盘I/O访问的频率,提高单个机器的I/O性能。
3.读写分离，使数据库能支撑更大的并发。
1--在从服务器可以执行查询工作(即我们常说的读功能)，降低主服务器压力;（主库写，从库读，降压）
2--在从服务器进行备份，避免备份期间影响主服务器服务;（确保数据安全）

二、主从复制原理

原理：
实现整个主从复制，需要由Master服务器上的IO进程，和Slave服务器上的Sql进程和IO进程共同完成.
要实现主从复制，首先必须打开Master端的binary log（bin-log）功能，因为整个MySQL 复制过程实际上就是Slave从Master端获取相应的二进制日志，然后再在自己slave端完全顺序的执行日志中所记录的各种操作。

1. 在主库上把数据更改（DDL DML DCL）记录到二进制日志（Binary Log）中。
2. 备库I/O线程将主库上的日志复制到自己的中继日志（Relay Log）中。
3. 备库SQL线程读取中继日志中的事件，将其重放到备库数据库之上。

---

master 负责写 -----A
slave relay-log -----B
I/o 负责通信读取binlog日志
SQL 负责写数据

1566358429307.png

步骤一：主库db的更新事件(update、insert、delete)被写到binlog
步骤二：从库发起连接，连接到主库
步骤三：此时主库创建一个binlog dump thread线程，把binlog的内容发送到从库
步骤四：从库启动之后，创建一个I/O线程，读取主库传过来的binlog内容并写入到relay log.
步骤五：还会创建一个SQL线程，从relay log里面读取内容，将更新内容写入到slave的db.

1.主从复制延迟大比较慢原因：
主服务器配置高，从服务器的配置低。
并发量大导致主服务器读的慢。从服务器写的慢
网络延迟比较高
从服务器的读写速度慢
2.从数据库的读的延迟问题了解吗？如何解决？
解决方法：
半同步复制—解决数据丢失的问题
并行复制—-解决从库复制延迟的问题

三、M-S 架构GTID 基于事务ID复制

1、什么是GTID？

全局事务标识：global transaction identifiers

是用来代替传统复制的方法，GTID复制与普通复制模式的最大不同就是不需要指定二进制文件名和位置。

2、GTID工作原理

1、master更新数据时，会在事务前产生GTID，一同记录到binlog日志中。
2、slave端的i/o 线程将变更的binlog，写入到本地的relay log中。
3、sql线程从relay log中获取GTID，然后对比slave端的binlog是否有记录。
4、如果有记录，说明该GTID的事务已经执行，slave会忽略。
5、如果没有记录，slave就会从relay log中执行该GTID的事务，并记录到binlog。

3、部署主从复制

1、架构：

1566361672882.png

2、准备环境

两台机器，关闭防火墙和selinux。两台机器环境必须一致。时间也得一致
192.168.1.6 mysql_master
192.168.1.7 mysql_slave

两台机器安装mysql5.7
[root@mysql-master ~]# wget https://dev.mysql.com/get/mysql80-community-release-el7-3.noarch.rpm

mysql安装

安装后之后记得修改密码

[root@mysql_master ~]# systemctl start mysqld
[root@mysql_master ~]# systemctl enable mysqld
[root@mysql_master ~]# netstat -lntp | grep :3306
tcp6       0      0 :::3306                 :::*                    LISTEN      1231/mysqld
[root@mysql_slave ~]# systemctl start mysqld
[root@mysql_slave ~]# systemctl enable mysqld
[root@mysql_slave ~]# netstat -lntp | grep :3306
tcp6       0      0 :::3306                 :::*                    LISTEN      1021/mysqld

master 操作：

[root@mysql_master ~]# vim /etc/my.cnf
server-id=6816   #定义server id master必写,建议使用ip后四位
log-bin = mylog #开启binlog日志，master比写
gtid_mode = ON    #开启gtid
enforce_gtid_consistency=1   #强制gtid
[root@mysql_master ~]# systemctl restart mysqld
[root@mysql_master ~]# mysql -uroot -pDuan@123
mysql> grant replication  slave,reload,super on *.*  to 'slave'@'%' identified by 'Duan@123';
#注:生产环境中密码采用高级别的密码，实际生产环境中将'%'换成slave的ip
Query OK, 0 rows affected, 1 warning (0.00 sec)
mysql> flush privileges;
注意:如果不成功删除以前的binlog日志
replication slave：拥有此权限可以查看从服务器，从主服务器读取二进制日志。
super权限：允许用户使用修改全局变量的SET语句以及CHANGE  MASTER语句
reload权限：必须拥有reload权限，才可以执行flush  [tables | logs | privileges]

slave 操作：

[root@mysql_slave ~]# vim /etc/my.cnf
server-id=2
gtid_mode = ON
enforce_gtid_consistency=1
master-info-repository=TABLE
relay-log-info-repository=TABLE
[root@mysql_slave ~]# systemctl restart mysqld
[root@mysql_slave ~]# mysql -uroot -pDuan@123
mysql> \e
change master to
master_host='master1',      #主ip 地址  最好用域名
master_user='授权用户',     #主服务上面创建的用户
master_password='授权密码', 
master_auto_position=1;
-> ;
Query OK, 0 rows affected, 2 warnings (0.02 sec)

image.png

mysql> start slave;    #启动slave角色
Query OK, 0 rows affected (0.00 sec)

mysql> show slave status\G   #查看状态，验证sql和IO是不是yes。

image.png

测试：
master :

[root@mysql_master ~]# mysql -uroot -pDuan@123

mysql> create database test;
Query OK, 1 row affected (0.00 sec)

mysql> create table test.t1(id int);
Query OK, 0 rows affected (0.02 sec)

mysql> insert into test.t1 values(1);
Query OK, 1 row affected (0.07 sec)

slave :

mysql> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| mysql              |
| performance_schema |
| sys                |
| test               |
+--------------------+
5 rows in set (0.00 sec)

mysql> use test
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A

Database changed
mysql> show tables;
+----------------+
| Tables_in_test |
+----------------+
| t1             |
+----------------+
1 row in set (0.00 sec)

mysql> select * from t1;
+------+
| id   |
+------+
|    1 |
+------+
1 row in set (0.00 sec)

mysql主从，master宕机，如何进行切换？

主机故障或者宕机：

1)在salve执行：
mysql> stop slave；
mysql> reset master；
2)查看是否只读模式：show variables like 'read_only';
只读模式需要修改my.cnf文件，注释read-only=1并重启mysql服务。
或者不重启使用命令关闭只读，但下次重启后失效：set global read_only=off;
3)查看show slave status \G;
4)在程序中将原来主库IP地址改为现在的从库IP地址，测试应用连接是否正常

四、主从复制binlog日志方式

准备环境

两台机器，关闭防火墙和selinux。两台机器环境必须一致。时间也得一致
192.168.1.10 mysql_master
192.168.1.11 mysql_slave

两台机器配置hosts解析
192.168.1.10 mysql_master
192.168.1.11 mysql_slave

配置master

1、在主服务器上，必须启用二进制日志记录并配置唯一的服务器ID。需要重启服务器。

编辑主服务器的配置文件my.cnf，添加如下内容

log-bin=/var/log/mysql/mysql-bin
server-id=8110

2、创建日志目录并赋予权限

[root@mysql_master ~]# mkdir /var/log/mysql
[root@mysql_master ~]# chown mysql.mysql /var/log/mysql

3、重启服务

[root@mysql_master ~]# systemctl restart mysqld

4、登陆mysql

[root@mysql_master ~]# mysql -uroot -pDuan@123
mysql> grant replication  slave,reload,super on *.*  to 'duan'@'%' identified by 'Duan@123';
mysql> flush privileges;
mysql> show master status\G

image.png

配置slave

[root@mysql_slave ~]# vim /etc/my.cnf
server-id=8111
[root@mysql_slave ~]# systemctl restart mysqld
[root@mysql_slave ~]# mysql -uroot -pDuan@123
mysql> \e
change master to
master_host='mysql_master',
master_user='duan',
master_password='Duan@123',
master_log_file='mysql-bin.000001',
master_log_pos=604;
    -> ;
mysql> start slave;
Query OK, 0 rows affected (0.00 sec)

mysql> show slave status\G

image.png

参数解释：
CHANGE MASTER TO
MASTER_HOST='master2.example.com',      //主服务器ip
MASTER_USER='replication',              //主服务器用户
MASTER_PASSWORD='password',             //用户密码
MASTER_PORT=3306,                       //端口
MASTER_LOG_FILE='master2-bin.001',      //binlog日志文件名称
MASTER_LOG_POS=4,                       //日志位置

测试

master
mysql> create database test;
Query OK, 1 row affected (0.00 sec)

mysql> create table test.t1(id int,name varchar(30));
Query OK, 0 rows affected (0.01 sec)

mysql> insert into test.t1 values(1,'tom'),(1,'jack');
Query OK, 2 rows affected (0.03 sec)
Records: 2  Duplicates: 0  Warnings: 0

slave
mysql> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| mysql              |
| performance_schema |
| sys                |
| test               |
+--------------------+
5 rows in set (0.00 sec)

mysql> select * from test.t1;
+------+------+
| id   | name |
+------+------+
|    1 | tom  |
|    1 | jack |
+------+------+
2 rows in set (0.00 sec)