大量資料寫入時,單筆插入效能低落。本文展示 CodeIgniter 框架下,結合事務控制、分批提交與日誌記錄的優化方案,顯著提升批量匯入效率。
$sub_form = array();
$loop = 0;
$ins_loop = 0;
$sum = count($form_datas);
$this->logger->info('insert data total:'.$sum);
// 開啟事務
$callStartTime = microtime(true);
$this->db->trans_start();
foreach ( $form_datas as $item ) {
$loop++;
$sub_form[] = $item;
// 每 200 筆或最後一筆執行批次插入
if (($loop % 200) == 0 || $loop == $sum) {
$this->logger->info('insert data num:'.$loop);
$res = $this->kb_object_instance_mdl->insert_batch($sub_form, $obj_id);
$ins_loop++;
unset($sub_form);
// 每 5 批次提交一次事務,避免長事務鎖定資源
if (($ins_loop % 5) == 0) {
$this->logger->info('insert data trans_complete ins_loop:'.$ins_loop);
$this->db->trans_complete();
if ($loop != $sum) {
$this->db->trans_start(); // 重新開啟事務
}
}
}
}
$callEndTime = microtime(true);
$callTime = $callEndTime - $callStartTime;
$this->logger->info('insert data use time:'.sprintf('%.4f',$callTime));
if ($this->db->trans_status() === TRUE) {
$this->_show_msg('1', array('data'=>'import ok'));
} else {
$this->_show_error('saveOrUpdate error');
}
insert_batch(),減少單次 SQL 語句長度與記憶體壓力。trans_complete(),釋放鎖定資源,再以 trans_start() 開啟新事務,平衡一致性與並發效能。microtime() 記錄總耗時,配合日誌追蹤各階段筆數,便於事後分析調優。trans_status() 判斷整體成敗,統一回應前端。INSERT IGNORE 或 ON DUPLICATE KEY UPDATE 處理重複鍵衝突此模式在 CodeIgniter 3.x/4.x 均適用,為高吞吐寫入提供可靠範本。