备库一抖动,半同步主库上的提交会先卡住。云数据库 MySQL 的复制说明写的是暂停约 10 秒,然后把复制降为异步,客户端又开始拿到成功。这个成功不再表示备库已经接住日志。自建 MySQL 8.0 用状态变量把同一件事暴露出来。下面只处理这个窗口:它确认什么、超时后变成什么、怎么观测、应用怎么避免把超时当成回滚。
半同步落在异步和全同步中间。异步是主库写完 binlog 就返回,不关心备库有没有取走。全同步要等副本都提交完才返回。半同步只等足够数量的备库确认:事件已经收到。
开源 MySQL 8.0 的确认点是,备库把该事务的事件写入 relay log 并刷盘后才回 ACK,不要求 SQL 线程执行并提交。源端默认等 1 个副本。收到 ACK 之前,会话拿不到返回。云数据库的半同步说明同向:备节点把数据写到 relay log(无需执行)后回成功,主节点收到成功才响应应用。两边都不是备库上的 SELECT 已经能看到这笔数据。
它保证的是:已经确认过的事务,至少在一台备库的日志里。切到这台备库时,这些已确认事务应该还在。它不保证只读实例没有延迟,也不保证所有备库一致。
自建实例还有两个默认值。rpl_semi_sync_source_timeout,8.0.26 之前的插件叫 rpl_semi_sync_master_timeout,默认 10000 毫秒。rpl_semi_sync_source_wait_point 默认 AFTER_SYNC:先刷 binlog、等 ACK,再提交存储引擎,然后返回客户端。所以默认路径上,引擎提交也在 ACK 之后。改成 AFTER_COMMIT 时,引擎先提交再等 ACK,其他会话可能先读到这笔数据,提交会话还没返回。这段间隙里源端若故障并切换,那些会话看到的行在新主上可能不存在。
云数据库文档没有公开等待点。产品说明里的“执行完更新后再复制”,不能直接等同于 AFTER_SYNC。客户端是在备库回成功之后才得到响应,引擎提交和 ACK 的先后没有写死,不要把云上半同步说成无损。
8.0.26 起新插件用 source / replica 命名,旧插件用 master / slave。一个实例只能装其中一套。查的时候两套名字都试,缺的那套不是故障。
不在显式事务里的语句会自动提交,半同步对每条这样的语句都等一次。一串自动提交的单行更新,等待按语句条数放大,不是每个业务动作只等一次。能放进同一个事务的写入不要拆开。
备库不可用或复制网络异常时,源端不会一直等。开源文档的行为是:超时仍没有足够 ACK,源端退回异步;至少有一个半同步备库追上后,再回到半同步。云数据库写的是同一类降级:复制异常时主节点暂停响应,量级是 MySQL 默认的 10 秒左右,然后降为异步;复制恢复后再回到半同步。半同步是一主一备。
云上这个 10 秒是文档给出的默认量级,不是一份测出来的延迟数字。内部参数名是否与 rpl_semi_sync_source_timeout 相同,以控制台参数列表为准,不要假设能 SET GLOBAL。
降级打开的窗口,是从等待结束到重新进入半同步之前。这段时间提交按异步返回。客户端已经拿到成功、日志却还没到备库,主库接着故障并切换,新主上会缺这些事务。还在等待、会话尚未返回的,不能算已提交成功。
自建 MySQL 还有一条官方限制:源端崩溃并完成切换后,不要把故障源再当作复制源,应丢弃。上面可能留着未被任何副本确认、因而在切换前未提交的事务。云数据库的切换由平台完成。应用要处理的是连接闪断,以及降级窗口里已经返回成功、新主上对不上的写入。
状态会自己切回去。抽查一次看到半同步正常,不能证明刚才没有降过。要看的是降级是否发生过,以及那段提交有没有离开主库。
把超时调到极大,买不到强一致,只是把每次备库抖动都变成长时间的提交阻塞。连接占着不还,池先满,现象像数据库宕了。超时比同城往返还短,正常抖动也会降级,半同步只剩名字。开源文档写明,相对异步的额外代价至少是一次 TCP 往返,近距离网络才划算。
云数据库 MySQL 5.6、5.7、8.0 有异步、半同步、强同步,5.5 只有异步。强同步在复制异常时不降级,主节点暂停响应,直到异常结束。架构是一主两备,只需一台备节点成功即可返回,避免单台备库把写路径堵死。
同一篇产品文档要两句一起读。强同步是备库日志同步完成后才应答。另一句写明:主节点或备节点不可用时,异步、半同步、强同步都有几率数据不一致。强同步换来的是异常时停写,而不是悄悄变成异步。确认点仍然是日志,不是备库执行完成。
复制方式 | 返回应用前 | 异常时 | 架构 |
|---|---|---|---|
异步 | 不等备库 | 主库继续写 | 一主一备 |
半同步 | 至少一台备库写下 relay log | 暂停约 10 秒后降为异步,恢复后再回去 | 一主一备 |
强同步 | 至少一台备库完成日志确认 | 不降级,主库停写直到异常结束 | 一主两备 |
能接受降级窗口里已返回成功的写入在切换后丢失,半同步的写可用性更好。不能接受悄悄丢、但能接受备库故障时写入阻塞,用强同步。两种都替代不了幂等和对账。
自建 MySQL 8.0 上,插件开关和当前是否走半同步是两个量。rpl_semi_sync_source_enabled(或 rpl_semi_sync_master_enabled)为 1 只表示开关打开,默认是 0。Rpl_semi_sync_source_status(或 Rpl_semi_sync_master_status)才表示现在是否在半同步路径上。文档的定义是:1 表示插件已启用,且没有因为确认超时退回异步;0 表示插件未启用,或已经退回异步。SHOW STATUS 有时把布尔值打印成 ON / OFF,对应 1 / 0。开关为 1(或 ON)、status 为 0(或 OFF),就是降级中。源端开了半同步但没有半同步备库时,源端直接走异步。
Rpl_semi_sync_source_yes_tx 是得到确认的提交数,Rpl_semi_sync_source_no_tx 是没有被副本成功确认的提交数,Rpl_semi_sync_source_clients 是连上的半同步备库数。旧插件把 source 换成 master,含义相同。它们是启动后的累计值,看采样间隔里的增量,不要看绝对值。
SHOW VARIABLES LIKE 'rpl_semi_sync%';
SHOW GLOBAL STATUS LIKE 'Rpl_semi_sync%';云数据库未必暴露这组插件变量。查不到不是没有降级,只是这个观测点不存在。改看提交耗时有没有成批卡在大约 10 秒再恢复,以及切换后按业务主键对账。
能查到变量的实例,按间隔采样。口令放在运行用户的 ~/.my.cnf,不要写进命令行。10.0.0.12 换成实例地址。
#!/bin/bash
set -eu
host="${1:-10.0.0.12}"
while true; do
echo "---- $(date '+%H:%M:%S') ----"
mysql --host="$host" --port=3306 --user=repl_observer \
--batch --skip-column-names \
--execute="SHOW GLOBAL STATUS LIKE 'Rpl_semi_sync%';"
sleep 10
done相邻两次里 status 为 0 或 OFF,说明当前已退回异步或插件没开。no_tx 在增加,说明出现了没有被副本成功确认的提交。两个一起看,避免只凭一个计数下结论。clients 为 0 时先查备库复制线程,而不是先改超时。
等待期间会话不返回。连接池把语句截止时间设成 3 秒,源端却还要等满大约 10 秒,调用方会先放弃。放弃只说明调用方不再等,不说明服务端没有提交。立刻重试同一笔业务,会和仍在进行或已经完成的第一次提交叠上。
截止时间要盖住半同步等待加上语句本身的执行,避免把正常的 ACK 等待判成失败。写入带幂等键,超时或切换之后先看键在不在,再决定要不要重做。下面这张表用 idem_key 做主键,重复插入会撞键。
CREATE TABLE payment (
idem_key varchar(64) NOT NULL,
order_id bigint NOT NULL,
amount int NOT NULL,
PRIMARY KEY (idem_key)
) ENGINE=InnoDB;
INSERT INTO payment (idem_key, order_id, amount)
VALUES ('pay-20261113-0001', 10001, 1990);重复键说明第一次已经落库,按成功处理。查不到键才允许重试。判断放在业务键上,不要用客户端收到错误来代替。连接池这边,提交变慢先表现为活跃连接上升、拿连接等待上升。只看错误率,会漏掉降级前那一段阻塞。
OFF,且 no_tx 增长,按降级窗口处理。原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。
如有侵权,请联系 cloudcommunity@tencent.com 删除。