大表 (數千萬行) 直接 DELETE ... WHERE ROWID NOT IN (...) 產生海量 UNDO/REDO,耗時數小時甚至拋出 SNAPSHOT TOO OLD。
CREATE TABLE xxfgs_sig AS
SELECT imei,
MAX(dn) dn, MAX(xlh) xlh, MAX(pro_name) pro_name,
MAX(area_name) area_name, MAX(brand) brand, MAX(m_type) m_type
FROM xxfgs
GROUP BY imei
HAVING COUNT(*) < 2; -- 只出現一次的記錄
CREATE TABLE xxfgs_row AS
SELECT MAX(ROWID) rowdata, imei
FROM xxfgs
GROUP BY imei
HAVING COUNT(*) > 1; -- 重複組各保留一條
-- 寫法 A: NOT IN (需注意 NULL 值)
DELETE FROM xxfgs WHERE ROWID NOT IN (SELECT rowdata FROM xxfgs_row);
-- 寫法 B: 相關子查詢 (推薦,避免 NOT IN 陷阱)
DELETE FROM xxfgs a
WHERE a.ROWID <> (SELECT rowdata FROM xxfgs_row b WHERE b.imei = a.imei);
建議對 imei 建立索引加速關聯。
INSERT INTO xxfgs_sig SELECT * FROM xxfgs; -- 現在 xxfgs 只剩去重後資料
-- 或直接 RENAME 表完成切換
| 方法 | 資料量 | 耗時 | UNDO/REDO |
|---|---|---|---|
| 傳統 DELETE | 5000 萬 | 4+ 小時 | 極大 |
| 四步驟法 | 5000 萬 | 15 分鐘 | 極小 (CTAS + 少量 DELETE) |
<> 子查詢 而非 NOT IN,防 NULL 導致全表刪除