萬盛學電腦網

您现在的位置: 萬盛學電腦網 >> 程式設計 >  >> 資料庫 >> MySQL 教學

MySQL 主從同步原理深度解析:三線程協作、異步複制與數據一致性保障

架構概覽

MySQL Replication 採用異步複制:Master 寫入 Binlog → Slave IO 線程拉取 → 寫入 Relay Log → Slave SQL 線程重放。涉及三個線程協作:

三大線程職責詳解

1. Master:Binlog Dump Thread(IO 線程)

  • 每個連接的 Slave 對應一個 Dump Thread
  • 讀取本地 Binlog 事件,發送給 Slave
  • 支援壓縮傳輸 slave_compressed_protocol=1

2. Slave:IO Thread(接收線程)

  • 連接 Master,請求指定 Binlog 位置(Master_Log_File, Read_Master_Log_Pos)
  • 接收事件,順序寫入 Relay Log (mysql-relay-bin.xxxxxx)
  • 更新 master.info (或 mysql.slave_master_info 表) 記錄下次請求位置

3. Slave:SQL Thread(重放線程)

  • 讀取 Relay Log,解析為 SQL 語句
  • 在 Slave 執行,更新數據
  • 更新 relay-log.info (或 mysql.slave_relay_log_info 表) 記錄執行位置
  • 支援多線程並行重放 slave_parallel_workers > 0 (MySQL 5.6+)

完整同步流程圖解


[Client] → [Master SQL] → [Binlog] ← [Master Dump Thread]
                                        ↓ Network
[Slave IO Thread] → [Relay Log] ← [Slave SQL Thread] → [Slave Data]
      ↑                                    ↑
 master.info                          relay-log.info

為什麼拆分 IO / SQL 兩線程?(歷史演進)

早期單線程模式:串行瓶頸 + 數據丟失風險大。

  • 單線程:拉取 → 解析 → 執行,全程串行,延遲大
  • Master 故障時,Slave 尚未拉取的 Binlog 永久丟失

Yahoo! Jeremy Zawodny 提出雙線程架構:

  • IO 線程專職「拉取寫入」,極快,最小化未拉取窗口
  • SQL 線程專職「重放執行」,可並行化
  • 大幅降低延遲與潛在丟失數據量

關鍵配置參數

參數建議值說明
log_binONMaster 必須啟用
binlog_formatROW最安全格式
gtid_modeONGTID 模式,簡化故障切換
enforce_gtid_consistencyON配合 GTID 必開
slave_parallel_workers4~CPU核心數並行重放,降低延遲
slave_parallel_typeLOGICAL_CLOCK基於組提交並行,最優
master_info_repositoryTABLE存入系統表,崩潰安全
relay_log_info_repositoryTABLE同上
sync_binlog1每次提交刷盤,最安全
innodb_flush_log_at_trx_commit1配合 sync_binlog=1 達到全持久

常見問題與排查

1. Slave_IO_Running: No

  • 網路不通 / 防火牆 / Master bind-address
  • 認證失敗:CHANGE MASTER TO 密碼錯誤
  • Binlog 被清理:Slave 落後超過過期時間

2. Slave_SQL_Running: No

  • 主鍵衝突 / 外鍵失敗 / 字元集不匹配
  • 查看 Last_SQL_Error,修正數據後 STOP SLAVE; START SLAVE;
  • 或跳過錯誤:SET GLOBAL sql_slave_skip_counter = 1; START SLAVE;(謹慎)

3. 秒級延遲監控

SHOW SLAVE STATUS\G
-- 關鍵指標
Seconds_Behind_Master: 0  -- 理想值
-- 注意:此值基於時間戳估算,不精確

-- 更精確:對比位置
-- Master: SHOW MASTER STATUS;
-- Slave:  Relay_Master_Log_File + Exec_Master_Log_Pos

半同步複制 進階保障

啟用 rpl_semi_sync_master=ON,Master 提交時等待至少一個 Slave 收到 Binlog(非執行完成)才返回客戶端。平衡效能與數據安全。

結語

理解三線程協作機制、GTID 優勢、並行重放配置,是運維穩定 MySQL 複制集群的核心技能。異步複制天然存在延遲與丟失風險,金融級業務請評估半同步或群組複制 (Group Replication)。

copyright © 萬盛學電腦網 all rights reserved