萬盛學電腦網

您现在的位置: 萬盛學電腦網 >> 程式設計 >  >> 資料庫 >> MySQL 教學

MySQL INSERT 批次插入多行資料高效寫法

低效寫法:循環單行 INSERT


for ($i=0; $i<=5; $i++) {
    $sql = "INSERT INTO users (uid, name) VALUES ($i, 'soulcy')";
    mysql_query($sql);  // 每次網路往返、解析、鎖、提交
}

5 行尚可,500 萬行會拖垮資料庫。

高效寫法:單條 SQL 多 VALUES


INSERT INTO `users` (`uid`, `name`) VALUES
(0, 'soulcy'), (1, 'soulcy'), (2, 'soulcy'), (3, 'soulcy'), (4, 'soulcy'), (5, 'soulcy');
  • 一次網路往返、一次解析、一個事務(若自動提交則隱式事務)。
  • 速度提升 10~50 倍。

PHP 動態構建批次 SQL 範例


$name = 'soulcy';
$batch = [];
for ($i = 0; $i <= 5000; $i++) {
    $batch[] = "($i, '$name')";
    if (count($batch) === 1000) {  // 分批 1000 行
        $sql = "INSERT INTO users (uid, name) VALUES " . implode(',', $batch);
        mysqli_query($link, $sql);
        $batch = [];
    }
}
if ($batch) {
    $sql = "INSERT INTO users (uid, name) VALUES " . implode(',', $batch);
    mysqli_query($link, $sql);
}

進階:LOAD DATA INFILE(極致速度)


-- 1. 產生 CSV/TSV 檔案(應用層寫檔)
-- 2. 伺服端導入
LOAD DATA INFILE '/tmp/users.txt'
INTO TABLE users
FIELDS TERMINATED BY '\t'
LINES TERMINATED BY '\n'
(uid, name);
  • 繞過 SQL 解析、索引逐行維護,直接按頁寫入,速度比批次 INSERT 快 5~10 倍。
  • 需 secure_file_priv 允許目錄、FILE 權限。

大批次導入檢查清單

  1. 關閉非必要索引:ALTER TABLE t DISABLE KEYS(MyISAM)/ 手動 DROP INDEX 後重建(InnoDB)。
  2. SET FOREIGN_KEY_CHECKS=0; SET UNIQUE_CHECKS=0;
  3. 分批提交(每 1000~5000 行 COMMIT),避免超大事務鎖住資源、Undo Log 爆漲。
  4. 預排序主鍵順序寫入,減少頁分裂。
  5. 監控 Innodb_buffer_pool_wait_free、Innodb_log_waits。
copyright © 萬盛學電腦網 all rights reserved