萬盛學電腦網

您现在的位置: 萬盛學電腦網 >> 程式設計 >  >> 網路程式設計 >> PHP 程式設計

PHP 寫入大量資料:file_put_contents vs fwrite 效能實測與最佳實踐

測試場景

寫入 1,000,000 行 CSV 格式資料(每行約 50 字元),比較三種寫入方式效能。

程式碼與結果

<?php
function microtimeFloat(): float {
    [$usec, $sec] = explode(' ', microtime());
    return (float)$usec + (float)$sec;
}

$file = __DIR__ . '/ratings.txt';
$rows = 1_000_000;

// 1. file_put_contents (FILE_APPEND) - 每行開關檔
$start = microtimeFloat();
for ($i = 0; $i < $rows; $i++) {
    $line = sprintf("%d,item%d,%.2f\n", $i, $i, rand(1,100)/100);
    file_put_contents($file, $line, FILE_APPEND);
}
echo "file_put_contents: " . (microtimeFloat() - $start) . " 秒\n";
// 結果:約 300+ 秒,且可能遺漏行數(非原子附加)

// 2. fopen + fwrite (單一 handle) - 推薦
@unlink($file);
$fp = fopen($file, 'wb');
$start = microtimeFloat();
for ($i = 0; $i < $rows; $i++) {
    $line = sprintf("%d,item%d,%.2f\n", $i, $i, rand(1,100)/100);
    fwrite($fp, $line);
}
fclose($fp);
echo "fwrite: " . (microtimeFloat() - $start) . " 秒\n";
// 結果:約 1-2 秒,資料完整

// 3. 暫存陣列批次寫入 (記憶體換速度)
@unlink($file);
$batch = 10000;
$buffer = [];
$fp = fopen($file, 'wb');
$start = microtimeFloat();
for ($i = 0; $i < $rows; $i++) {
    $buffer[] = sprintf("%d,item%d,%.2f\n", $i, $i, rand(1,100)/100);
    if (count($buffer) >= $batch) {
        fwrite($fp, implode('', $buffer));
        $buffer = [];
    }
}
if ($buffer) fwrite($fp, implode('', $buffer));
fclose($fp);
echo "batch fwrite: " . (microtimeFloat() - $start) . " 秒\n";
// 結果:約 0.8 秒 (最快)
?>

效能對比總結

方法耗時 (100萬行)記憶體可靠性適用場景
file_put_contents(..., FILE_APPEND)~300 秒低差 (易遺漏、競態)極少量、非關鍵日誌
fopen('wb') + fwrite~1.5 秒低高通用大量寫入
批次緩衝 + fwrite~0.8 秒中 (批次大小)高極高效能需求
SplFileObject::fwrite~1.2 秒低高OO 風格偏好

高併發寫入建議

  • 單檔案追加:flock($fp, LOCK_EX) 獨佔鎖,寫完 LOCK_UN。
  • 日誌切割:按日期/大小輪轉,避免單檔過大。
  • 極高吞吐:改用 Redis List / Kafka / ClickHouse 等專用存儲,非檔案系統。
copyright © 萬盛學電腦網 all rights reserved