当前位置: 代码网 > it编程>数据库>Mysql > MySQL主从同步+binlog详解

MySQL主从同步+binlog详解

2025年07月06日 Mysql 我要评论
一、简介mysql内建的复制功能是构建大型,高性能应用程序的基础 通过将mysql的某一台主机(master)的数据复制到其他主机(slaves)上,并重新执行一遍来执行 复制过程中一台服务器充当主服

一、简介

mysql内建的复制功能是构建大型,高性能应用程序的基础 通过将mysql的某一台主机(master)的数据复制到其他主机(slaves)上,并重新执行一遍来执行 复制过程中一台服务器充当主服务器,而其他一个或多个其他服务器充当从服务器

主从复制原理

主要基于mysql二进制日志 主要包括三个线程(2个i/o线程,1个sql线程)

lnmp(centos7,mysql5.6)

vmware workstation pro配置了3个虚拟机,均安装了lnmp环境:

  • master: 192.168.0.105       
  • slave:192.168.0.106 、192.168.0.107

二、原理

(1)主数据库master进行增删改操作后,相应操作记录的语句(比如 create database test)会记录到binlog日志文件中(binlog日志文件一般和数据库data文件夹在一起)。

(2)从数据库slave会请求主数据库的binlog日志文件,拷贝到slave的中继日志中,然后在自己的从数据库上自动执行相同的操作语句,进而实现主从的同步。

注:这里,我们所需要配置的只是主从环境以及开启binlog日志,其他的mysql会自动完成。

二、配置主从同步

2.1环境准备

克隆三台没有下过mysql的虚拟机(或恢复快照)

ip为 

  • master   192.168.1.112 
  • slave1     192.168.1.113
  •  slave2     192.168.1.114

下载mysql:yum install mysql-server -y

不会下载或者下载报错:mysql数据库安装---离线下载

2.2主从配置

2.2.1【master】(主服务器)

1.)选举112为主服务器

vim /etc/my.cnf
 
[client]
user=root
password=abc1234
 
[mysqld]
datadir=/var/lib/mysql
socket=/var/lib/mysql/mysql.sock
 
log-error=/var/log/mysqld. log
pid-file=/var/run/mysqld/mysqld.pid
 
server_id=11 #可以是任意正整数,一般比slave大

然后开启mysql服务

2.)在数据库中创建用户,以及授权,修改master库的密码加密方式

  • repl 你所创建的用户名
  • mysql@123 用户密码
mysql> create user repl@'%'identified with mysql_native_password by 'mysql@123'
    -> ;
query ok, 0 rows affected (0.00 sec)

mysql> grant replication slave on *.* to repl@'%';
query ok, 0 rows affected (0.00 sec)

查看主配置状态:show master status;

3 )关闭防火墙,禁用selinux 

[root@openeuler-1 ~]  systemctl stop firewalld

[root@openeuler-1 ~]  setenforce 0
setenforce: selinux is disabled  #已被禁用

[root@openeuler-1 ~]  getenforce #查看selinux状态
disabled

2.2.2【slave】从服务器

【slave1】和【slave2】

1.)配置主配置文件,添加一个server_id(唯一标识)

vim /etc/my.cnf

  • slave1的   113

  • slave2的   114

配置后开启/重启mysql服务:systemctl start mysql.service/systemctl restart mysql.service

2.)在从mysql上进行部署,连接主库(因为连接的是同一个主库,两个slave操作一样)

ps:如果start slave后,要重新连接主库(change maste to), 必须先stop slave

  • 从库指向主库创建的host,用户名,密码,二进制文件,以及节点
mysql> change master to
    -> master_host='192.168.1.112',
    -> master_user='repl',
    -> master_password='mysql@123',
    -> master_log_file='binlog.000001',
    -> master_log_pos=980;
query ok, 0 rows affected, 8 warnings (0.01 sec)

3.)开启主从

mysql> start slave;
query ok, 0 rows affected, 1 warning (0.00 sec)

4.) 关闭防火墙,禁用selinux  

[root@openeuler-1 ~]  systemctl stop firewalld

[root@openeuler-1 ~]  setenforce 0
setenforce: selinux is disabled  #已被禁用

[root@openeuler-1 ~]  getenforce #查看selinux状态
disabled

5.) 查看是否成功并测试

 

三、基于binlog的主从同步

3.1【主服务器】

1.) 开启binlog

在id后面添加两行

[root@openeuler-1 mysql]# vim /etc/my.cnf

server_id=11

gtid_mode=on
enforce-gtid-consistency=on

[root@openeuler-1 mysql]# systemctl restart mysqld.service

3.2【从服务器】

1.)暂停slave,进入配置文件添加两行,重启服务(重启更改后的配置才会生效)

mysql> stop slave;
query ok, 0 rows affected, 1 warning (0.01 sec)

mysql> \q
bye

[root@openeuler-1 mysql]# vim /etc/my.cnf

server_id=113

gtid_mode=on
enforce-gtid-consistency=on

[root@openeuler-1 mysql]# systemctl restart mysqld.service 

2.)测试gid是否开启

mysql> show variables like '%gtid%';

3.) 暂停slave,连接主库

mysql> stop slave;
query ok, 0 rows affected, 1 warning (0.00 sec)

mysql> change master to
    -> master_host='192.168.1.112',
    -> master_user='repl',
    -> master_password='mysql@123',
    -> master_auto_position=1;        #使用 gtid 自动定位。
query ok, 0 rows affected, 7 warnings (0.00 sec)

mysql> start slave;
query ok, 0 rows affected, 1 warning (0.02 sec)

3.3 gtid 从库误写入操作处理

从库一般是不需要写入数据的,如果不小心写入一般会报错

last_sql_error: error 'can't create database 'db4'; database exists' on query. default database: 'db4'. query: 'create database db4'

retrieved_gtid_set: 71bfa52e-4aae-11e9-ab8c-000c293b577e:1-3                #说明gid3报错
executed_gtid_set:  71bfa52e-4aae-11e9-ab8c-000c293b577e:1-2,
7ca4a2b7-4aae-11e9-859d-000c298720f6:1

解决方法:注入空事务

暂停salve:
stop slave;

#3是报错的id号
set gtid_next='99279e1e-61b7-11e9-a9fc-000c2928f5dd:3';
begin;commit; 
set gtid_next='automatic';
    
这里的xxxxx:n 也就是你的slave sql thread报错的gtid,或者说是你想要跳过的gtid。

最好的解决方案:重新构建主从环境

3.4  io进程错误

发现io进程错误,检查日志,排除故障:

tail localhost.localdomain.err

常见错误:各个复制的虚拟机server_id不能相同

解决方法:修改id,重启mysql

四、延时同步

4.1简介

是我们人为配置的一种特殊同步,从库和主库同步延时n小时

为什么要有延时同步?

数据库有两种故障:

  • 物理损坏:可以用主从复制解决。主库rm删除,直接将应用切换到从库
  • 逻辑损坏:普通主从同步无法解决。eg:主库drop database ns,从库也没了

4.2配置延时同步

主库加一个参数即可,其他不变

 change master to master_delay=300;  #延时300s

4.3故障模拟恢复

1.)主库数据操作

mysql> stop slave;
query ok, 0 rows affected, l warning(0.00 sec)

mysal> change master to master_delay=300;  #延时300s
query ok, 0 rows affected, 2 warnings (0.0l sec)

mysql> start slave;
query ok, 0 rows affected, 1 warning (0.02 sec)

mysq1> show slave status \g
sql_delay: 300
sql_remaining_delay: null

2.)停止从库sql线程

stop slave sql_thread;

3.) 找relaylog的截取点和终点

起点:

relay_log_file:db01-relay-bin.000002
relay_log_pos:482

终点:

4.)  从库恢复relaylog

source /tmp/relay.sq1

5.)  从库身份解除

db0l [relay]>stop slave ;
db0l [relay]>reset slave all

总结

以上为个人经验,希望能给大家一个参考,也希望大家多多支持代码网。

(0)

相关文章:

版权声明:本文内容由互联网用户贡献,该文观点仅代表作者本人。本站仅提供信息存储服务,不拥有所有权,不承担相关法律责任。 如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 2386932994@qq.com 举报,一经查实将立刻删除。

发表评论

验证码:
Copyright © 2017-2025  代码网 保留所有权利. 粤ICP备2024248653号
站长QQ:2386932994 | 联系邮箱:2386932994@qq.com