当前位置: 代码网 > it编程>数据库>Mysql > MySQL 半同步复制的实现

MySQL 半同步复制的实现

2024年09月04日 Mysql 我要评论
一、半同步复制介绍mysql基础复制有三种模式:异步复制/同步复制/半同步复制,3种模式各有利弊,下面对各种复制模式的优缺点做个简要的介绍:异步复制(asynchronous replicaton)这

一、半同步复制介绍

mysql基础复制有三种模式:异步复制/同步复制/半同步复制,3种模式各有利弊,下面对各种复制模式的优缺点做个简要的介绍:

异步复制(asynchronous replicaton)

这是mysql默认的复制模式,异步复制指主库写binlog、从库i/o线程读binlog并写入relaylog、从库sql线程重放事务这三步之间是异步的。异步复制的优点是主库不需要关心备库的状态,主库不保证事务被传输到从库,如果主库崩溃,某些事务可能还未发送到从库,切换后可能导致事务的丢失。其优点是可以有更高的吞吐量,缺点是不能保持数据实时一致,不适合要求主从数据一致性要求较高的应用场景。

同步复制(synchronous replicaton)

同步复制的模式下,主库在提交事务前,必须确认事务在所有的备库上都已经完成提交。即主库是最后一个提交的,在提交前需要将事务传递给从库并完成重放、提交等一系列动作。其优点是任何时候主备库都是一致的,主库的崩溃不会丢失事务,缺点是由于主库需要等待备库先提交事务,吞吐量很低。

半同步复制(semisynchronous replicaiton)

mysql从5.5开始引入了半同步复制,半同步复制介于异步复制和同步复制之间。主库在提交事务时先等待,必须确认至少一个从库收到了事件(从库将事件写入relaylog,不需要重放和提交,并向主库发送一个确认信息ack),主库收到确认信息后才会正式commit。

与同步复制相比,半同步复制速度快很多,因为他只需要至少1个从库确认写入relaylog,并不需要完成在从库上的事务提交,同时又比异步复制更安全,因为主库在提交时,事务至少已经存在2个地方(主库的binlog和从库的relaylog)。由于半同步复制在提交事务前,需要从库返还确认信息,所以这里涉及到网络的往返通信开销,因此半同步复制只适合在网络条件较好的且地理上距离不远的环境部署,否则可能会因为网络延迟大幅降低主库性能。

半同步复制的特点:

  • 从库在连接主库时需要表明它是否支持半同步复制。
  • 如果主库启用了半同步复制,且有一个支持半同步复制的从库,则主库上事务提交将等待至少一个从库确认已收到事务,或者直到发生超时。
  • 默认只有在将事务写入其中继日志并刷新到磁盘后,主库才会提交事务(也可以配置成提交后等待确认)。
  • 如果没有任何从库确认事务的情况下发生超时,则主库将退化为异步复制。当至少有一个半同步从库赶上时,主库恢复半同步复制。退化与恢复过程都是自动的。
  • 必须在主库和从库上都启用半同步复制,否则使用异步复制。

二、搭建半同步复制

半同步复制是以插件的形式实现的,要使用半同步复制,要在主从分别安装相应的插件,并且通过参数来控制半同步复制。

在使用半同步复制前需要先满足下列条件:

  • 服务器要支持动态加载,参数have_dynamic_loading要设置为true(mysql8.0默认就是true)。
  • 已经完成基础异步复制的配置。
  • 不支持一从多主的复制(多通道)。

现以上一篇配置好的异步复制为基础来配置半同步复制

异步复制(asynchronous replication)

2台数据库环境如下:

  • 192.168.3.71(主库 主机名master)
  • 192.168.3.72(从库 主机名slave01)

2.1 安装半同步插件

安装半同步插件时,需要在主库安装semisync_master.so(8.0.26 以后版本为semisync_source.so),在从库安装semisync_slave.so(8.0.26以后版本为semisync_replica.so)。执行安装命令时,插件必须在插件目录(参数plugin_dir)存在。

在主库安装插件:

install plugin rpl_semi_sync_master soname 'semisync_master.so';
或mysql 8.0.26以上版本执行下面命令:
install plugin rpl_semi_sync_source soname 'semisync_source.so';

在备库安装插件:

install plugin rpl_semi_sync_slave soname 'semisync_slave.so';
或mysql 8.0.26以上版本执行下面命令:
install plugin rpl_semi_sync_replica soname 'semisync_replica.so';

安装完成后可以用show plugins来查看是否安装成功,安装成功后插件列表中应该有下列类似信息:

show plugins;

2.2 启用半同步复制

确认主备的插件都成功安装后,使用下面命名调整参数,启用半同步复制。

主库执行:

set global rpl_semi_sync_master_enabled=1;
或mysql 8.0.26以后版本执行:
set global rpl_semi_sync_source_enabled = 1;

备库执行:

set global rpl_semi_sync_slave_enabled=1;
或mysql 8.0.26以后版本执行:
set global rpl_semi_sync_replica_enabled = 1;

为了防止配置不丢失,建议也将配置添加到my.cnf中:

主库配置文件添加:

[mysqld]
rpl_semi_sync_master_enabled=1
# 或8.026版本添加:
# rpl_semi_sync_source_enabled=1

主库配置文件添加:

[mysqld]
rpl_semi_sync_slave_enabled=1
# 或8.026版本添加:
# rpl_semi_sync_replica_enabled=1

如果在完成上面配置时异步复制正在运行,则需要重启从库的i/o线程来切换到半同步复制:

stop slave io_thread;
start slave io_thread;
show status like 'rpl_semi_sync_slave_status';    -- 查看备库半同步复制状态

查看主库半同步复制状态:

show status like 'rpl_semi_sync_master_status';

通过状态变量,我们看到主备的半同步都是处于工作状态,半同步复制的搭建完成。

三、配置半同步复制

当完成了半同步配置后,系统上和半同步相关的配置参数就可以使用了,这些参数可用来调整半同步复制的配置:

主库查看半同步相关配置参数:

show variables like 'rpl_semi_sync%';

如果使用的是8.0.26以上的版本,参数中的'master'会被替换为'source','slave'会被替换为'replica',下面依次解释各参数设置含义:

rpl_semi_sync_master_enabled

用来控制是否开启半同步复制,on代表开启,off代表关闭。

rpl_semi_sync_master_timeout

主库等待从库ack超时的时长,单位是毫秒,默认是10000(10s)。

rpl_semi_sync_master_trace_level

半同步复制时主库的调试级别

rpl_semi_sync_master_wait_for_slave_count

主库需要收到多少个ack才认为此次提交成功,否则就降级为异步复制,默认是1,即只要有1个从库确认即可提交。

rpl_semi_sync_master_wait_no_slave

为on时(默认值),当状态变量rpl_semi_sync_master_clients中的值小于rpl_semi_sync_master_wait_for_slave_count时(即从库数小于需要的最小确认数),rpl_semi_sync_master_status依旧为on,只有当事务提交后等待rpl_semi_sync_master_timeout超时后,rpl_semi_sync_master_status才会变为off,即降级为异步复制;

为off时,当状态变量rpl_semi_sync_master_clients中的值小于rpl_semi_sync_master_wait_for_slave_count时,rpl_semi_sync_master_status立即显示为off,即立即降级为异步复制。

rpl_semi_sync_master_wait_point

控制主库上commit、接收ack、返回控制给客户端的时间点。值为after_sync(默认)或after_commit。

  • after_sync:主库会等待从库的ack后再提交事务,最后返还控制权给客户端。主库上所有会话同一时间看到提交的事务,如果发生failover,主从数据是一致的。
  • after_commit:主库会先提交事务,再等待ack,最后返还控制权给客户端。主库会先提交,此时主库上其他会话可以看到已提交的事务,但执行事务的会话还未返还,依然在等待从库确认,如果从库因为崩溃没有处理这个事务,那么其他会话会在主从看到不一致的数据(主库事务提交了,从库的事务丢了)。

四、监控半同步复制

完成了半同步配置后,和半同步相关的相关状态变量可以帮助我们监控半同步复制的状态:

show status like 'rpl_semi_sync%';

主库有半同步复制相关的状态变量解释:

rpl_semi_sync_master_clients:当前有多少个半同步从库连接到主库。

rpl_semi_sync_master_net_avg_wait_time:主库等待从库回复的平均时间,以微秒为单位。此变量始终为0,不推荐使用,并且将在以后的版本中删除。

rpl_semi_sync_master_net_wait_time:主库等待从库回复的总时间,以微秒为单位。此变量始终为0,不推荐使用,并且将在以后的版本中删除。

rpl_semi_sync_master_net_waits:主库等待从库回复的总次数。

rpl_semi_sync_master_no_times:主库关闭半同步复制的次数。

rpl_semi_sync_master_no_tx:从库未成功确认的事务数。

rpl_semi_sync_master_status:为on时表示使用半同步复制,为off时表示异步复制。

rpl_semi_sync_master_timefunc_failures:调用gettimeofday等时间函数时主库失败的次数。

rpl_semi_sync_master_tx_avg_wait_time:主库等待一个事务的平均时间,以微秒为单位。

rpl_semi_sync_master_tx_wait_time:主库等待事务的总时间,以微秒为单位。

rpl_semi_sync_master_tx_waits:主库等待事务的总次数。

rpl_semi_sync_master_wait_pos_backtraverse:主库等待事件的二进制日志次数低于之前等待事件的总次数。当事务等待回复的顺序与其二进制日志事件的写入顺序不同时,就会发生这种情况。

rpl_semi_sync_master_wait_sessions:当前正在等待从库回复的会话数。

rpl_semi_sync_master_yes_tx:从库成功确认的事务数。

到此这篇关于 mysql 半同步复制的实现的文章就介绍到这了,更多相关 mysql 半同步复制内容请搜索代码网以前的文章或继续浏览下面的相关文章希望大家以后多多支持代码网!

(0)

相关文章:

  • nginx: [emerg] unknown directive报错误的问题

    前言今天修改nginx中的conf配置文件,由于自己没有备份,导致出问题,解决了两个小时都没有解决掉。不过遇到问题是好事,可以解决,如果有备份遇到问题也许不会一直去解决吧。但是,如…

    2024年09月04日 数据库
  • MySQL Prepared语句的具体使用

    在数据库应用中,很多sql语句都会重复执行很多次,每次执行可能只是where条件中的变量值不同,但mysql依然会解析sql语法并生成执行计划。对于这类情况,可以利用prepare…

    2024年09月04日 数据库
  • MySQL加减间隔时间函数DATE_ADD和DATE_SUB的实现

    MySQL加减间隔时间函数DATE_ADD和DATE_SUB的实现

    前言mysql中内置函数date_add 和 date_sub能对指定的时间进行增加或减少一个指定的时间间隔,返回的是一个日期。语法添加时间间隔date_add... [阅读全文]
  • MySQL虚拟列的具体使用

    MySQL虚拟列的具体使用

    在mysql中,虚拟列(也称为生成列)是一种特殊类型的表列,它不像普通列直接存储数据,而是根据其他列中的数据动态生成。虚拟列可以基于一个或多个其他列的值进行计算... [阅读全文]
  • mysql查询锁表的实现方法

    mysql查询锁表的实现方法

    今天在做数据更新的时候,发现表中数据量不大,但是更新语句执行很久都没成功,经过查询后发现是表锁死导致的,本文记录一下锁表解决步骤:1.查看表是否被锁(1)直接在... [阅读全文]
  • MySQL自连接与子查询方式

    MySQL自连接与子查询方式

    1. 自连接自连接是表自身与自身做笛卡尔积,在sql中进行条件查询,都是指定某一列或多个列之间进行关系运算,无法进行行与行之间的运算,在某些情况下需要对行与行之... [阅读全文]

版权声明:本文内容由互联网用户贡献,该文观点仅代表作者本人。本站仅提供信息存储服务,不拥有所有权,不承担相关法律责任。 如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 2386932994@qq.com 举报,一经查实将立刻删除。

发表评论

验证码:
Copyright © 2017-2025  代码网 保留所有权利. 粤ICP备2024248653号
站长QQ:2386932994 | 联系邮箱:2386932994@qq.com