萬盛學電腦網

您现在的位置: 萬盛學電腦網 >> 程式設計 >  >> 資料庫 >> MySQL 教學

MHA 實現 MySQL 高可用架構:原理、部署與故障切換實戰詳解

MHA (Master High Availability) 由日本 MySQL 專家 Yoshinori Matsunobu 開發,是一套成熟的 MySQL 主從故障自動切換方案。其核心優勢在於:秒級故障切換 (通常 10-30 秒)、最大程度保證數據一致性、無需修改現有 MySQL 部署、無額外硬體成本、支援線上主庫切換 (僅阻塞寫入 0.5-2 秒)。本文系統闡述 MHA 架構原理、生產級部署步驟與故障演練全過程。

一、 MHA 架構組件

組件部署位置核心職責
MHA Manager獨立管理節點 (建議 2 台做 HA)監控 Master 健康狀態、協調故障切換流程、提供管理命令 (切換、狀態檢查、連線測試)
MHA Node所有 MySQL 節點 (Master/Slave)1. 保存 Master Binlog (若可訪問)
2. 生成/應用差異 Relay Log
3. 清理 Relay Log (不停 SQL 線程)

二、 故障切換核心流程

  1. 故障偵測: Manager 定期 (預設 3 秒) Ping Master,連續失敗觸發切換流程。
  2. 選主: 比較所有 Slave 的 Relay_Master_Log_File + Exec_Master_Log_Pos (即 SQL 線程執行位置),選擇**最接近 Master** 的 Slave 作為 Latest Slave (新候選主)**。
  3. 日志補全: 若舊 Master 可通過 SSH 訪問,拉取其未同步的 Binlog 事件 (最大程度減少數據丟失)。
  4. 差異協調: 其他 Slave 與 Latest Slave 比對,生成差異 Relay Log。
  5. 提升新主: 在 Latest Slave 上應用補全的 Binlog,執行 CHANGE MASTER TO 指向新位置,啟用 log_bin、log_slave_updates,成為新 Master。
  6. 重建從庫: 其他 Slave 應用差異 Relay Log,執行 CHANGE MASTER TO 指向新 Master,啟動復制。
  7. 並行恢復: 即使有數萬個 Slave,新 Master 恢復時間不受影響,因 Slave 恢復並行進行。
MHA 架構圖
MHA 切換流程圖

三、 生產環境部署實戰 (CentOS 6/7)

環境規劃

角色HostnameIPMySQL Port
MHA Managermha-manager192.168.56.10-
MySQL Mastermysql-master192.168.56.203306
MySQL Slave1mysql-slave1192.168.56.213306
MySQL Slave2mysql-slave2192.168.56.223306

1. 前置準備 (所有節點)

# 關閉 SELinux、防火牆 (或放行 3306/22)
# 統一 hosts 解析
cat >> /etc/hosts <> /etc/sudoers

# SSH 免密互信 (Manager -> 所有節點,節點間互信)
# Manager 上生成密鑰分發
ssh-keygen -t rsa
ssh-copy-id mysqladmin@mysql-master
ssh-copy-id mysqladmin@mysql-slave1
ssh-copy-id mysqladmin@mysql-slave2

# 驗證
ssh mysqladmin@mysql-master "hostname"

2. MySQL 端配置 (所有節點)

  • 啟用 Binlog、GTID (可選)、log_slave_updates、relay_log_purge=0 (防止 Relay Log 過早清理)。
  • 建立 MHA 專用監控/管理帳號:
    GRANT ALL PRIVILEGES ON *.* TO 'mha'@'192.168.56.%' IDENTIFIED BY 'mha_pass';
    GRANT REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO 'mha'@'192.168.56.%';
  • 若 MySQL 非標準安裝路徑,建立軟連結:
    ln -s /usr/local/mysql/bin/mysqlbinlog /usr/bin/mysqlbinlog
    ln -s /usr/local/mysql/bin/mysql /usr/bin/mysql

3. 安裝 MHA Node (所有 MySQL 節點)

yum install -y perl-DBD-MySQL perl-Config-Tiny perl-Log-Dispatch perl-Parallel-ForkManager perl-Time-HiRes
rpm -ivh mha4mysql-node-0.58-0.el7.centos.noarch.rpm

4. 安裝 MHA Manager (管理節點)

yum install -y perl-DBD-MySQL perl-Config-Tiny perl-Log-Dispatch perl-Parallel-ForkManager perl-Time-HiRes perl-Mail-Sender
rpm -ivh mha4mysql-manager-0.58-0.el7.centos.noarch.rpm

5. 配置 MHA Manager

mkdir -p /etc/mha /var/log/mha

# 全局配置 /etc/mha/manager.cnf
[server default]
user=mha
password=mha_pass
manager_workdir=/var/log/mha
manager_log=/var/log/mha/manager.log
remote_workdir=/var/log/mha
ssh_user=mysqladmin
repl_user=repl
repl_password=repl_pass
ping_interval=3
master_ip_failover_script=/usr/local/bin/master_ip_failover.sh  # VIP 漂移腳本
shutdown_script=/usr/local/bin/power_manager.sh                # 可選:IPMI 強制下電防腦裂

# 應用配置 /etc/mha/app1.cnf
[server1]
hostname=mysql-master
port=3306
master_binlog_dir=/var/lib/mysql
candidate_master=1
check_repl_delay=0

[server2]
hostname=mysql-slave1
port=3306
master_binlog_dir=/var/lib/mysql
candidate_master=1

[server3]
hostname=mysql-slave2
port=3306
master_binlog_dir=/var/lib/mysql
candidate_master=1

6. 配置檢查與啟動

# 檢查 SSH 連通性
masterha_check_ssh --conf=/etc/mha/app1.cnf

# 檢查主從復制狀態
masterha_check_repl --conf=/etc/mha/app1.cnf

# 啟動 Manager (後台守護進程)
nohup masterha_manager --conf=/etc/mha/app1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/mha/manager.log 2>&1 &

# 檢查狀態
masterha_check_status --conf=/etc/mha/app1.cnf
SSH 連通性檢查
主從復制檢查
Manager 啟動日誌
Manager 狀態檢查

四、 故障切換演練與驗證

  1. 模擬 Master 故障: 在 Master 上 kill -9 $(pidof mysqld) 或拔網線/關機。
  2. 觀察 Manager 日誌: tail -f /var/log/mha/manager.log,應看到偵測故障 → 選主 → 應用 Binlog → 提升新主 → 重建從庫的完整流程。
  3. 驗證新架構:
    • 原 Slave1 (或 Slave2) 已變為 Master (可寫入)。
    • 其餘 Slave 已自動指向新 Master 且復制正常 (Slave_IO_Running=Yes, Slave_SQL_Running=Yes)。
    • 應用端連線 (透過 VIP 或代理) 自動切換至新 Master,寫入恢復正常。
故障切換測試
新主狀態
從庫切換狀態

五、 MHA 核心優勢總結

優勢說明
切換快典型 10-30 秒完成,DeNA 實測 4 秒。傳統 Heartbeat+DRBD 無法做到秒級。
數據一致自動識別/應用差異 Relay Log,配合 Semi-sync 幾乎零數據丟失。
零侵入工作在原生 MySQL 5.0+ 主從上,無需修改配置、遷移引擎、升級版本。
省資源無需額外備機 (Manager 可跑在 Slave 上),一套 Manager 管百套集群。
零性損僅 Ping 監控,無額外查詢負載,性能同原生復制。
引擎無關支援 InnoDB/MyISAM/TokudB 等一切支援復制的引擎。
線上切換masterha_master_switch --master_state=alive 實現計劃性主庫遷移,僅阻塞寫入 0.5-2s。

六、 避坑指南與最佳實踐

  1. 必須開啟 Semi-sync Replication: rpl_semi_sync_master=ON, rpl_semi_sync_slave=ON,大幅降低 Binlog 未同步導致的數據丟失風險。
  2. 設定 relay_log_purge=0: 防止切換前 Relay Log 被自動清理,導致差異協調失敗。
  3. Manager 高可用: 部署 2 台 Manager,配合 Keepalived/VIP 或 Corosync/Pacemaker 實現 Manager 自身 HA。
  4. VIP 漂移腳本: master_ip_failover_script 使用 ip addr add/del 或雲端 API 綁定/解綁 VIP/EIP。
  5. 防腦裂: 配置 shutdown_script 調用 IPMI/IDRAC 強制下電故障 Master,或使用 masterha_master_switch --master_state=dead --dead_master_shutdown=1。
  6. 監控告警: 監控 masterha_check_status 狀態、Manager 進程存活、主從延遲 (Seconds_Behind_Master)。

七、 總結

MHA 是 MySQL 高可用領域「輕量、成熟、高效」的代表作。它不嘗試解決所有分布式一致性問題,而是專注於**單主多從架構下的故障自動切換**,並將這件事做到極致。對於基於原生 MySQL 復制的業務,MHA 仍是極具性價比的首選方案。部署關鍵在於:**SSH 免密、權限最小化、Semi-sync 開啟、Relay Log 保留、Manager 自身 HA、定期故障演練**。

copyright © 萬盛學電腦網 all rights reserved