萬盛學電腦網

您现在的位置: 萬盛學電腦網 >> 程式設計 >  >> 資料庫 >> Oracle 教學

Oracle Exp/Imp 大量資料突破 2GB 限制:管道、壓縮、磁帶、裸裝置與 Direct Path 實戰方案

傳統 exp/imp 受限於 32 位作業系統單檔 2GB 上限,大型資料庫匯出動輒數十 GB。本文系統介紹五大突破方案:管道+壓縮、直接寫磁帶、裸裝置、Direct Path 模式、並行拆分,並量化效能提升。

方案一:Named Pipe + Compress (最通用、無額外硬體)

# 1. 建立命名管道
mknod /tmp/exp_pipe p

# 2. 背景啟動壓縮進程讀管道寫檔
compress < /tmp/exp_pipe > /backup/exp.dmp.Z &

# 3. exp 寫入管道 (檔案參數指向管道)
exp userid=system/manager file=/tmp/exp_pipe full=y ... &

# 4. 等待完成,獲得壓縮後 .Z 檔 (通常縮減 60-80%)
# imp 時反向操作
zcat /backup/exp.dmp.Z | imp userid=system/manager file=/tmp/imp_pipe full=y ...
  • 管道存在記憶體,無 2GB 限制。
  • compress/gzip 即時壓縮,磁碟佔用極小。
  • 全程無中間完整 .dmp 落地。

方案二:直接寫入磁帶裝置

exp file=/dev/rmt/0m volsize=4G full=y
imp file=/dev/rmt/0m volsize=4G full=y
  • volsize 指定單卷容量,自動換卷提示。
  • 需磁帶庫硬體支援,適合離線歸檔備份。

方案三:裸裝置

exp file=/dev/rdsk/c0t3d0s0 volsize=4G full=y
  • 繞過檔案系統,直接寫入區塊裝置,無檔案大小限制。
  • 需精確規劃分區大小,風險較高 (誤寫即毀資料)。

方案四:Direct Path Export (expst/impst) —— 官方加速器

# 編譯單任務版本 (繞過雙任務架構)
cd $ORACLE_HOME/rdbms/lib
make -f oracle.mk expst
make -f oracle.mk impst

# 使用方式與 exp/imp 完全相同
expst file=/tmp/exp_pipe full=y ...
impst file=/tmp/imp_pipe full=y ...
  • 繞過 SQL 層直接讀取資料塊,**速度提升 20-30%**。
  • 嚴格限制:執行期間**絕對不能有其他 Session 連線操作資料庫**,否則可能損壞資料一致性。
  • 僅適合維護窗口獨佔資料庫時使用。

方案五:並行拆分匯出 (Data Pump 10g+ 原生支援)

# 傳統 exp 不支援並行,需手動拆表
exp tables=big_table_1 file=exp_1.dmp ...
exp tables=big_table_2 file=exp_2.dmp ...
# 多進程並行執行,再手動合併或分別導入

Data Pump expdp/impdp 內建 PARALLEL、DUMPFILE=file%U.dmp 自動分檔並行,強烈建議 10g+ 環境全面遷移至 Data Pump。

方案選型決策樹

  • 無額外硬體、需在線業務窗口 → **Pipe + Compress**
  • 有磁帶庫、離線備份窗口 → **直接寫磁帶**
  • 維護窗口獨佔、追求極速 → **expst/impst**
  • 10g+ 環境 → **Data Pump PARALLEL + 分檔** (首選)

突破 2GB 限制不再是難題,關鍵在於依據硬體資源、維護窗口、復原目標 (RTO/RPO) 選擇最適組合,並定期演練匯入驗證。

copyright © 萬盛學電腦網 all rights reserved