萬盛學電腦網

您现在的位置: 萬盛學電腦網 >> 程式設計 >  >> 資料庫 >> MySQL 教學

360 Atlas MySQL 中間層編譯安裝完整指南

隨著業務量增長,單一 MySQL 實例往往難以應對高並發讀寫壓力。各大科技公司紛紛自研 MySQL 中間層:百度的 dbproxy、淘寶的 TDDL、網易的方案、阿里巴巴的 Cobar、360 的 Atlas、樓方鑫的 OneProxy、搜狐的 dbproxy 以及官方的 MySQL Fabric 等。這些中間層功能各異,有的支援分庫分表,有的專注讀寫分離。技術選型時需謹慎評估:自研雖可控但成本高,採用成熟開源產品則能快速落地。本文以 360 開源的 Atlas 為例,詳細記錄其編譯安裝與配置全流程。

一、環境準備與源碼獲取

建議在 /data/software 目錄下操作,便於統一管理:

mkdir -p /data/software && cd /data/software
wget https://github.com/Qihoo360/Atlas/archive/2.2.1.tar.gz
mv 2.2.1.tar.gz atlas.2.2.1.tar.gz
tar zxvf atlas.2.2.1.tar.gz

二、依賴庫安裝

編譯前需確保系統已安裝 GCC 等基礎構建工具,並安裝以下核心依賴:

yum install -y libevent-devel lua-devel openssl-devel flex mysql-devel
yum install -y xz gettext-devel
yum -y install libffi*

2.1 安裝 glib (≥2.32)

cd /data/software
wget https://ftp.acc.umu.se/pub/gnome/sources/glib/2.33/glib-2.33.6.tar.xz
xz -d glib-2.33.6.tar.xz
cd glib-2.33.6
./configure && make && make install
ldconfig

2.2 安裝 jemalloc

cd /data/software
wget https://www.canonware.com/download/jemalloc/jemalloc-3.1.0.tar.bz2
tar xvf jemalloc-3.1.0.tar.bz2
cd jemalloc-3.1.0
make && make install
cp lib/libjemalloc.so.1 /usr/local/lib/
ldconfig

三、編譯安裝 Atlas

進入解壓目錄,修改 bootstrap.sh 指定安裝路徑(本例為 /home/mysql/dbproxy):

cd /data/software/Atlas-2.2.1
vim bootstrap.sh

將腳本內容替換為:

#!/bin/sh
base=$(cd "$(dirname "$0")"; pwd)
cd $base
PKG_CONFIG_PATH=/usr/local/lib/pkgconfig ./configure \
  --with-mysql=/usr \
  --prefix=/home/mysql/dbproxy \
  CFLAGS="-DHAVE_LUA_H -O2" \
  LDFLAGS="-lm -ldl -lcrypto -ljemalloc" \
  LUA_CFLAGS="-I/usr/local/include/" \
  LUA_LIBS="-L/usr/local/lib -llua"

執行編譯安裝:

./bootstrap.sh
make && make install
排錯提示: 若編譯報錯,請檢查 config.log,常見問題為 jemalloc 未安裝或版本過低、libffi/glib 版本不符。

四、配置文件調整

4.1 修改啟動腳本路徑

vim /home/mysql/dbproxy/bin/mysql-proxyd
# 將 proxydir=/usr/local/mysql-proxy 改為
proxydir=/home/mysql/dbproxy
# 或使用 sed 一鍵替換:
sed -i 's%proxydir=/usr/local/mysql-proxy%proxydir=/home/mysql/dbproxy%g' /home/mysql/dbproxy/bin/mysql-proxyd

4.2 編寫核心配置 dbproxy.cnf

配置文件後綴必須為 .cnf,放置於 /home/mysql/dbproxy/conf/ 目錄:

[mysql-proxy]
admin-username = user
admin-password = pwd
admin-address = 0.0.0.0:2345
proxy-backend-addresses = 192.168.0.220:9858
proxy-read-only-backend-addresses = 192.168.1.221:9858,192.168.0.14:9858
pwds = dbproxy_longxibendi_w: /iZxz+0GRoA=,dbproxy_longxibendi_r:/iZxz+0GRoA=
daemon = true
keepalive = true
event-threads = 4
log-level = message
log-path = /home/mysql/dbproxy/log
sql-log = ON
sql-log-slow = 10
wait-timeout = 10
proxy-address = 0.0.0.0:12340
charset = utf8
client-ips = 127.0.0.1, 192.168.1,192.168.0.220,192.168.1.221

關鍵參數說明:

  • proxy-backend-addresses:主庫地址(寫入請求路由)
  • proxy-read-only-backend-addresses:從庫地址(讀請求路由,支援多個,逗號分隔)
  • pwds:加密後的密碼映射,格式為 用戶名:加密密文
  • event-threads:工作線程數,建議設為 CPU 核心數
  • client-ips:允許連線的客戶端 IP 白名單

4.3 資料庫賬號授權

假設主庫 192.168.0.220,從庫 192.168.1.221、192.168.0.14,中間層 IP 為 192.168.0.220:

# 主庫執行
mysql -uroot -p -h127.0.0.1 -P5858
GRANT SELECT,UPDATE,DELETE,INSERT ON longxibendi.* 
  TO dbproxy_longxibendi_w@192.168.0.220 IDENTIFIED BY '123456';

# 從庫同樣授權,注意 IP 為中間層地址
GRANT SELECT ON longxibendi.* 
  TO dbproxy_longxibendi_r@192.168.0.220 IDENTIFIED BY '123456';

五、啟動與驗證

cd /home/mysql/dbproxy/bin
./mysql-proxyd dbproxy start

測試連線:

mysql -udbproxy_longxibendi_w -h192.168.0.220 -p123456 -P12340
mysql> show databases;

進階驗證建議測試:事務完整性、讀寫分離路由、主庫宕機自動切換、從庫故障剔除等場景。

總結

Atlas 作為 360 開源的成熟中間層,支援讀寫分離、分庫分表、SQL 審計等企業級功能。生產環境部署前,務必完成壓力測試與故障演練,並建立監控告警體系(如連線數、延遲、QPS 等指標)。

copyright © 萬盛學電腦網 all rights reserved