萬盛學電腦網

您现在的位置: 萬盛學電腦網 >> 程式設計 >  >> 伺服器教學

GlusterFS 分布式文件系統部署實戰:雙節點複製卷構建指南

GlusterFS 是開源分布式文件系統,通過彈性哈希算法定位文件,無需元數據服務器,避免單點故障,適合大數據量離線應用、網絡存儲、冗余備份場景。本文記錄基於 CentOS 6.5 雙節點部署複製卷的完整過程。

架構優勢

  • 無元數據服務器:彈性哈希算法直接定位文件,避免元數據節點單點故障
  • 線性擴展:動態添加磚塊即可擴容,性能隨節點增長線性提升
  • 多協議訪問:原生 FUSE、NFS、CIFS 三種掛載方式
  • 複製/分片/條帶:靈活組合卷類型滿足不同可靠性/性能需求

環境準備

節點IP主機名存儲目錄
g1192.168.0.107g1/data
g2192.168.0.136g2/data

系統初始化

# 關閉防火牆與 SELinux
service iptables stop
chkconfig iptables off
sed -i 's/SELINUX=enforcing/SELINUX=disabled/' /etc/selinux/config

# 設置主機名與 hosts 映射
echo "g1" > /etc/hostname
hostname g1
cat >> /etc/hosts <<'EOF'
192.168.0.107 g1
192.168.0.136 g2
EOF

g2 節點同理修改為 g2 對應信息。

安裝編譯依賴

yum install -y gcc gcc-c++ flex flex-devel bison bison-devel openssl openssl-devel libxml2 libxml2-devel

編譯安裝 FUSE 與 GlusterFS

# FUSE 2.9.3
tar zxvf fuse-2.9.3.tar.gz
cd fuse-2.9.3
./configure && make && make install

# GlusterFS 3.6.0
tar zxvf glusterfs-3.6.0.tar.gz
cd glusterfs-3.6.0
./configure --prefix=/usr/local/glusterfs && make && make install

兩節點均需執行上述編譯安裝。

啟動服務與構建集群

# 啟動 glusterd
service glusterd start

# 創建命令軟鏈接
ln -s /usr/local/glusterfs/sbin/gluster /usr/bin/gluster

# g1 節點將 g2 加入集群
gluster peer probe g2
# 輸出: peer probe: success

驗證集群狀態

gluster peer status
# Number of Peers: 1
# Hostname: g2
# State: Peer in Cluster (Connected)

創建並啟動複製卷

# 創建雙副本卷 (replica 2)
gluster volume create test-volume replica 2 transport tcp g1:/data g2:/data force

# 啟動卷
gluster volume start test-volume

# 查看卷信息
gluster volume info

關鍵參數:
replica 2:雙副本,數據寫入兩節點
transport tcp:TCP 傳輸協議
force:強制覆蓋非空目錄

客戶端掛載驗證

客戶端需同樣安裝 FUSE 與 GlusterFS 客戶端。

mkdir /mnt/gfs
mount -t glusterfs g1:test-volume /mnt/gfs
df -h

輸出顯示 g1:test-volume 掛載成功,容量與單節點一致(複製卷不疊加容量)。g2 節點同理掛載 g2:test-volume 可達到同樣效果,實現客戶端就近訪問。

常用管理命令

操作命令
查看卷狀態gluster volume status test-volume
擴容添加磚塊gluster volume add-brick test-volume g3:/data
縮容移除磚塊gluster volume remove-brick test-volume g2:/data start
重新平衡數據gluster volume rebalance test-volume start
設置配額gluster volume quota test-volume limit-usage / 100GB
開啟配額gluster volume quota test-volume enable
查看幫助gluster help

注意事項與生產建議

  • 網絡延遲敏感:節點間建議萬兆網或專用存儲網,延遲 > 1ms 顯著影響性能
  • 分片大文件:大文件場景啟用 disperse (EC) 卷類型節省空間
  • 客戶端緩存:掛載參數添加 backup-volfile-servers=g2:test-volume 實現故障切換
  • 監控告警:整合 Prometheus + Grafana 監控 gluster volume profile 指標
  • 版本兼容:客戶端版本不得高於服務端主版本號

結語

GlusterFS 以去中心化架構解決了傳統分布式存儲的元數據瓶頸,雙節點複製卷部署簡單,適合中小規模非核心業務存儲。生產環境建議 3 節點起步,配合仲裁機制確保數據一致性,並制定完善的災備演練預案。

copyright © 萬盛學電腦網 all rights reserved