萬盛學電腦網

您现在的位置: 萬盛學電腦網 >> 程式設計 >  >> 網路程式設計 >> PHP 程式設計

PHP + Redis 多進程實現 200 萬用戶即時推送架構實戰

單執行緒逐筆推送 200 萬用戶極其緩慢且易超時。本文分享一套「Redis 佇列 + PHP 多進程 Worker」架構,實測可在分鐘級完成百萬級推送,並具備擴展性與容錯機制。

架構總覽

推送架構圖

  1. 主控腳本:讀取用戶資料 → 寫入 Redis List (push_getchannel_success) → 啟動 N 個 Worker 進程 → 監控進度 → 發送測試推送 → 等待完成。
  2. 寫入腳本 (redis_getchannel.php):分批從 DB 讀取用戶 Channel ID,RPUSH 進 Redis List。
  3. Worker 進程 (redis_push.php):LPOP 取出 Channel ID → 呼叫第三方 Push API (百度雲推送/極光/個推等) → 記錄日誌 → 睡眠配額控制 → 循環直到隊列為空 → 自動退出。

核心程式碼片段

主控腳本 (關鍵邏輯)

<?php
include_once(dirname(__FILE__) . '/../../config.inc.php');
import('push.class.php');
import('Redis.class.php');

$redis = new RedisCache($Credis['host'], $Credis['port']);

// 1. 若隊列已有資料(上次未完成)則跳過寫入
if (!$redis->Scount('push_getchannel_success')) {
    exec("php redis_getchannel.php {$config['file']}"); // 背景寫入用戶 Channel ID
}

// 2. 啟動多進程 Worker
$num = 15; // 進程數,可依 CPU 核心數調整
for ($i = 1; $i <= $num; $i++) {
    // & 符號讓進程在背景執行,> /dev/null 2>&1 抑制輸出
    exec("php redis_push.php '{$jsonConfig}' > /dev/null 2>&1 &");
}

// 3. 監控迴圈
while (true) {
    $running = exec('ps aux | grep redis_push.php | grep -v grep | wc -l');
    $remaining = $redis->Scount('push_getchannel_success');
    echo "進程數: $running, 剩餘: $remaining\n";
    if ($running == 0) {
        echo "推送完成,耗時 " . (time() - $startTime) . " 秒";
        break;
    }
    sleep(10);
}

Worker 進程核心邏輯 (redis_push.php)

<?php
$config = json_decode($argv[1], true);
$redis = new RedisCache(...);
$push  = new Channel(...);

while (true) {
    $channelId = $redis->Lpop('push_getchannel_success');
    if (!$channelId) break; // 隊列空,退出

    // 呼叫第三方推送 API
    $push->BaiduPush($channelId, $config['Title'], $config['Content'], ...);

    // 速率控制:每推送 N 筆睡眠 S 秒,避免觸發第三方限流
    if (++$count % $config['num'] == 0) sleep($config['s']);
}

// 進程自然結束,主控腳本偵測到進程數歸零即視為完成

關鍵優化點

  • 多 List 分片:用戶量超大時,將用戶按 hash 分散到 push_queue_0 ~ push_queue_N,每個 List 對應一組 Worker,實現水平擴展。
  • 短生命週期進程:Worker 每處理固定筆數 (如 500 筆) 即主動退出並由主控腳本重啟,規避 PHP 長跑記憶體洩漏/假死問題。
  • 增量同步:每日定時腳本將新增用戶同步至專屬用戶表,推送時只讀取此表,避免全量掃描。
  • 監控告警:主控腳本整合 SMTP 郵件通知、測試推送驗證、進度即時輸出。

擴展性設計

  • 推送通道抽象化:Channel::BaiduPush()、JPush()、Getui() 介面一致,切換供應商零改動。
  • 進程數動態調整:主控腳本可讀取系統負載 (CPU/記憶體) 自動增減 Worker。
  • 優先級隊列:VIP 用戶寫入高優先級 List,專屬 Worker 優先消費。

此架構已在實際營運環境穩定服務 200 萬+ 用戶推送,核心思想「隊列解耦 + 多進程消費 + 短命 Worker + 監控自癒」可廣泛應用於大批量異步任務處理。

copyright © 萬盛學電腦網 all rights reserved