萬盛學電腦網

您现在的位置: 萬盛學電腦網 >> 程式設計 >  >> 資料庫 >> MySQL 教學

Redis 鍵空間大小統計實戰:基於 SCAN + DEBUG 的輕量級分析腳本

MySQL 可通過 information_schema 輕松統計表大小,但 Redis 缺乏原生「按模式統計內存佔用」命令。本文提供基於 SCAN + DEBUG 的 PHP 輕量腳本,按預定義鍵模式統計序列化長度,快速定位大 Key、大模式。

核心思路

  1. SCAN 游標遍歷全庫鍵(非阻塞,生產安全)
  2. 按正則模式分類(如 foo:*、bar:*、.* 兜底)
  3. DEBUG key 獲取 serializedlength(序列化後字節長度)
  4. 累加各模式總長度,輸出報表

完整 PHP 腳本

<?php
$patterns = array(
    'foo:.+',      // 業務模式 1
    'bar:.+',      // 業務模式 2
    '.+'           // 兜底:所有鍵
);

$redis = new Redis();
$redis->setOption(Redis::OPT_SCAN, Redis::SCAN_RETRY);  // 自動重試

$result = array_fill_keys($patterns, 0);

while ($keys = $redis->scan($it, $match = '*', $count = 1000)) {
    foreach ($keys as $key) {
        foreach ($patterns as $pattern) {
            if (preg_match("/^{$pattern}$/", $key)) {
                if ($v = $redis->debug($key)) {
                    $result[$pattern] += $v['serializedlength'];
                }
                break;  // 命中首個模式即停止,避免重複計數
            }
        }
    }
}

var_dump($result);
?>

關鍵點解析

技術點說明
SCAN vs KEYSSCAN 增量迭代不阻塞,KEYS 全量掃描會卡死實例
DEBUG key返回 serializedlength、refcount、encoding 等內部信息
序列化長度 vs 實際內存serializedlength < 實際佔用(未含對象頭、指針、碎片),但相對大小具參考性
模式優先級數組順序決定優先級,建議具體模式在前,通配符在後

鍵模式發現輔助命令

# 實時監控命令流,提取寫操作涉及的鍵前綴
redis-cli monitor | awk -F '"' '$2 ~ "ADD|SET|STORE|PUSH" {print $4}' | sort | uniq -c | sort -nr

進階擴展方向

  • 多實例聚合:叢集模式下遍歷所有分片節點合併統計
  • 可視化報表:對接 Grafana/ECharts 展示 Top N 模式、趨勢變化
  • 告警聯動:單模式佔用超閾值自動告警
  • RDB 離線分析:配合 redis-rdb-tools 解析 RDB 文件,無在線壓力

工具對比

生產環境使用建議

  1. 低峰期執行(如 02:00-04:00)
  2. COUNT 1000 可調大至 5000 減少往返
  3. 超大實例(>1 億鍵)建議抽樣或離線 RDB 分析
  4. 結果持久化至時序數據庫,構建內存佔用趨勢圖

「看不見的內存佔用」是 Redis 穩定性的隱形殺手。定期執行模式級統計,配合大 Key 掃描,能將內存突增風險消滅在萌芽狀態。

copyright © 萬盛學電腦網 all rights reserved
工具優點缺點
本腳本輕量、無依賴、邏輯可控、易二次開發全量掃描耗時、serializedlength 有偏差
redis-rdb-tools離線分析、報表豐富、支援內存分析需獲取 RDB 文件、Java 環境、大文件解析慢
Redis 4.0+ MEMORY USAGE原生命令、準確返回內存佔用單鍵查詢、無批次統計、需遍歷鍵
RedisBigKeys / rdb-bigkeys專註大 Key 發現、速度快不支援按業務模式聚合