Node.js 單執行緒事件迴圈模型雖簡化並發編程,但無法直接利用多核 CPU。針對 Mozilla Persona 專案中「互動請求需低延遲、批次任務耗時長」的雙峰負載特性,本文對比五種架構方案,最終推薦 compute-cluster 模組實現進程級並行,達成高效率、高響應、優雅降級、簡單易用的四大目標。
關鍵指標:效率 (多核利用率)、響應 (互動請求延遲)、優雅降級 (過載保護)、簡單 (開發維護成本)。
function handler(req, res) {
var result = heavyComputeSync(req.data); // 阻塞事件迴圈
res.send(result);
}
function heavyComputeAsync(input, cb) {
var out = heavyComputeSync(input); // 仍在主執行緒同步執行
process.nextTick(() => cb(null, out));
}
核心思想:主進程專職分發/監控,專用 Worker 進程處理計算任務,透過 IPC 通訊。
// 主進程
const computeCluster = require('compute-cluster');
const cc = new computeCluster({ module: './worker.js' }); // 啟動 Worker 池
// 非同步提交任務,自動負載均衡
cc.enqueue({ input: 'task-1' }, (err, result) => console.log('task-1 done', result));
cc.enqueue({ input: 'task-2' }, (err, result) => console.log('task-2 done', result));
// worker.js - 專職計算進程
process.on('message', function(m) {
var output = heavyComputeSync(m.input); // 可阻塞,不影響主進程
process.send(output);
});
| 指標 | 表現 |
|---|---|
| 多核並行 | Worker 數可配置至 CPU 核心數,100% 利用率 |
| 響應能力 | 主進程極輕量 (僅分發/收集),隨時處理互動請求 |
| 優雅降級 | 內建排隊監控:maxRequestTime 參數自動拒絕可能超時任務 |
| 簡單整合 | 保持非同步 API 風格,調用代碼無需修改 |
compute-cluster 記錄每個 Worker 完成任務的平均耗時,預測新任務耗時。若 預測耗時 > maxRequestTime (如 7s,預留 3s 網路),直接拒絕並回傳錯誤,避免進入佇列拖垮系統。
const cc = new computeCluster({
module: './worker.js',
maxRequestTime: 7000 // 7 秒硬性超時
});
SharedArrayBuffer 或臨時檔案路徑,避免 IPC 序列化開銷。Node.js 12+ 穩定支援 worker_threads,同進程多執行緒共享記憶體 (SharedArrayBuffer),適合細粒度並行。但進程隔離性較差 (一個 Worker 崩潰影響整個進程),計算密集型長任務仍推薦 compute-cluster 進程級隔離架構。
總結:Compute Cluster 進程級隔離 + 非同步分發 + 智慧過載保護 是 Node.js 處理計算密集型任務同時保持高響應服務的最佳架構模式,經生產環境大規模驗證,值得納入技術棧標準庫。