一、基礎用法
dd:用指定大小的塊拷貝一個文件,並在拷貝的同時進行指定的轉換。
注意:指定數字的地方若以下列字符結尾,則乘以相應的數字:b=512;c=1;k=1024;w=2
參數注釋:
if=文件名:輸入文件名,缺省為標准輸入。即指定源文件。< if=input file >
of=文件名:輸出文件名,缺省為標准輸出。即指定目的文件。< of=output file >
ibs=bytes:一次讀入bytes個字節,即指定一個塊大小為bytes個字節。
obs=bytes:一次輸出bytes個字節,即指定一個塊大小為bytes個字節。
bs=bytes:同時設置讀入/輸出的塊大小為bytes個字節。
cbs=bytes:一次轉換bytes個字節,即指定轉換緩沖區大小。
skip=blocks:從輸入文件開頭跳過blocks個塊後再開始復制。
seek=blocks:從輸出文件開頭跳過blocks個塊後再開始復制。
注意:通常只用當輸出文件是磁盤或磁帶時才有效,即備份到磁盤或磁帶時才有效。
count=blocks:僅拷貝blocks個塊,塊大小等於ibs指定的字節數。
conv=conversion:用指定的參數轉換文件。
ascii:轉換ebcdic為ascii
ebcdic:轉換ascii為ebcdic
ibm:轉換ascii為alternate ebcdic
block:把每一行轉換為長度為cbs,不足部分用空格填充
unblock:使每一行的長度都為cbs,不足部分用空格填充
lcase:把大寫字符轉換為小寫字符
ucase:把小寫字符轉換為大寫字符
swab:交換輸入的每對字節
noerror:出錯時不停止
notrunc:不截短輸出文件
sync:將每個輸入塊填充到ibs個字節,不足部分用空(NUL)字符補齊。
二、dd應用實例
1.將本地的/dev/hdb整盤備份到/dev/hdd
代碼如下:
heng@me: dd if=/dev/hdb of=/dev/hdd
2.將/dev/hdb全盤數據備份到指定路徑的image文件
代碼如下:
heng@me: dd if=/dev/hdb of=/root/image
3.將備份文件恢復到指定盤
代碼如下:
heng@me: dd if=/root/image of=/dev/hdb
4.備份/dev/hdb全盤數據,並利用gzip工具進行壓縮,保存到指定路徑
代碼如下:
heng@me: dd if=/dev/hdb | gzip > /root/image.gz
5.將壓縮的備份文件恢復到指定盤
代碼如下:
heng@me: gzip -dc /root/image.gz | dd of=/dev/hdb
6.備份與恢復MBR
備份磁盤開始的512個字節大小的MBR信息到指定文件:
代碼如下:
heng@me: dd if=/dev/hda of=/root/image count=1 bs=512
count=1指僅拷貝一個塊;bs=512指塊大小為512個字節。
恢復:
代碼如下:
heng@me: dd if=/root/image of=/dev/had
將備份的MBR信息寫到磁盤開始部分
7.備份軟盤
代碼如下:
heng@me: dd if=/dev/fd0 of=disk.img count=1 bs=1440k (即塊大小為1.44M)
8.拷貝內存內容到硬盤
代碼如下:
heng@me: dd if=/dev/mem of=/root/mem.bin bs=1024 (指定塊大小為1k)
9.拷貝光盤內容到指定文件夾,並保存為cd.iso文件
代碼如下:
heng@me: dd if=/dev/cdrom(hdc) of=/root/cd.iso
10.增加swap分區文件大小
第一步:創建一個大小為256M的文件:
代碼如下:
heng@me: dd if=/dev/zero of=/swapfile bs=1024 count=262144
第二步:把這個文件變成swap文件:
代碼如下:
heng@me: mkswap /swapfile
第三步:啟用這個swap文件:
代碼如下:
heng@me: swapon /swapfile
第四步:編輯/etc/fstab文件,使在每次開機時自動加載swap文件:
代碼如下:
/swapfile swap swap default 0 0
11.銷毀磁盤數據
代碼如下:
heng@me: dd if=/dev/urandom of=/dev/hda1
注意:利用隨機的數據填充硬盤,在某些必要的場合可以用來銷毀數據。
12.測試硬盤的讀寫速度
代碼如下:
heng@me: dd if=/dev/zero bs=1024 count=1000000 of=/root/1Gb.file
heng@me: dd if=/root/1Gb.file bs=64k | dd of=/dev/null
通過以上兩個命令輸出的命令執行時間,可以計算出硬盤的讀、寫速度。
13.確定硬盤的最佳塊大小:
代碼如下:
heng@me: dd if=/dev/zero bs=1024 count=1000000 of=/root/1Gb.file
heng@me: dd if=/dev/zero bs=2048 count=500000 of=/root/1Gb.file
heng@me: dd if=/dev/zero bs=4096 count=250000 of=/root/1Gb.file
heng@me: dd if=/dev/zero bs=8192 count=125000 of=/root/1Gb.file
通過比較以上命令輸出中所顯示的命令執行時間,即可確定系統最佳的塊大小。
14.修復硬盤:
代碼如下:
heng@me: dd if=/dev/sda of=/dev/sda 或dd if=/dev/hda of=/dev/hda
當硬盤較長時間(一年以上)放置不使用後,磁盤上會產生magnetic flux point,當磁頭讀到這些區域時會遇到困難,並可能導致I/O錯誤。當這種情況影響到硬盤的第一個扇區時,可能導致硬盤報廢。上邊的命令有可能使這些數 據起死回生。並且這個過程是安全、高效的。
15.利用netcat遠程備份
代碼如下:
heng@me: dd if=/dev/hda bs=16065b | netcat < targethost-IP > 1234
在源主機上執行此命令備份/dev/hda
代碼如下:
heng@me: netcat -l -p 1234 | dd of=/dev/hdc bs=16065b
在目的主機上執行此命令來接收數據並寫入/dev/hdc
代碼如下:
heng@me: netcat -l -p 1234 | bzip2 > partition.img
heng@me: netcat -l -p 1234 | gzip > partition.img
以上兩條指令是目的主機指令的變化分別采用bzip2、gzip對數據進行壓縮,並將備份文件保存在當前目錄。
16.將一個很大的視頻文件中的第i個字節的值改成0x41(也就是大寫字母A的ASCII值)
代碼如下:
echo A | dd of=bigfile seek=$i bs=1 count=1 conv=notrunc
三、/dev/null和/dev/zero的區別
/dev/null,外號叫無底洞,你可以向它輸出任何數據,它通吃,並且不會撐著!
/dev/zero,是一個輸入設備,你可你用它來初始化文件。該設備無窮盡地提供0,可以使用任何你需要的數目——設備提供的要多的多。他可以用於向設備或文件寫入字符串0。
/dev/null——它是空設備,也稱為位桶(bit bucket)。任何寫入它的輸出都會被拋棄。如果不想讓消息以標准輸出顯示或寫入文件,那麼可以將消息重定向到位桶。
代碼如下:
heng@me:if=/dev/zero of=./test.txt bs=1k count=1
heng@me:ls –l
total 4
-rw-r--r-- 1 oracle dba 1024 Jul 15 16:56 test.txt
heng@me:find / -name access_log 2>/dev/null
1使用/dev/null
把/dev/null看作”黑洞”, 它等價於一個只寫文件,所有寫入它的內容都會永遠丟失.,而嘗試從它那兒讀取內容則什麼也讀不到。然而, /dev/null對命令行和腳本都非常的有用
禁止標准輸出
代碼如下:
heng@me:cat $filename >/dev/null #文件內容丟失,而不會輸出到標准輸出.
禁止標准錯誤
代碼如下:
heng@me:rm $badname 2>/dev/null #這樣錯誤信息[標准錯誤]就被丟到太平洋去了
禁止標准輸出和標准錯誤的輸出
代碼如下:
heng@me:cat $filename 2>/dev/null >/dev/null
如果”$filename”不存在,將不會有任何錯誤信息提示;如果”$filename”存在, 文件的內容不會打印到標准輸出。因此,上面的代碼根本不會輸出任何信息。當只想測試命令的退出碼而不想有任何輸出時非常有用。
2使用/dev/zero
像/dev/null一樣, /dev/zero也是一個偽文件, 但它實際上產生連續不斷的null的流(二進制的零流,而不是ASCII型的)。 寫入它的輸出會丟失不見, 而從/dev/zero讀出一連串的null也比較困難, 雖然這也能通過od或一個十六進制編輯器來做到。
/dev/zero主要的用處是用來創建一個指定長度用於初始化的空文件,就像臨時交換文件。
用/dev/zero創建一個交換臨時文件
代碼如下:
#!/bin/bash
# 創建一個交換文件.
ROOT_UID=0 # Root 用戶的 $UID 是 0.
E_WRONG_USER=65 # 不是 root?
FILE=/swap
BLOCKSIZE=1024
MINBLOCKS=40
SUCCESS=0
# 這個腳本必須用root來運行.
if [ "$UID" -ne "$ROOT_UID" ]
then
echo; echo "You must be root to run this script."; echo
exit $E_WRONG_USER
fi
blocks=${1:-$MINBLOCKS} # 如果命令行沒有指定,
#+ 則設置為默認的40塊.
# 上面這句等同如:
# --------------------------------------------------
# if [ -n "$1" ]
# then
# blocks=$1
# else
# blocks=$MINBLOCKS
# fi
# --------------------------------------------------
if [ "$blocks" -lt $MINBLOCKS ]
then
blocks=$MINBLOCKS # 最少要有 40 個塊長.
fi
echo "Creating swap file of size $blocks blocks (KB)."
dd if=/dev/zero of=$FILE bs=$BLOCKSIZE count=$blocks # 把零寫入文件.
mkswap $FILE $blocks # 將此文件建為交換文件(或稱交換分區).
swapon $FILE # 激活交換文件.
echo "Swap file created and activated."
exit $SUCCESS
關於 /dev/zero 的另一個應用是為特定的目的而用零去填充一個指定大小的文件, 如掛載一個文件系統到環回設備 (loopback device)或"安全地" 刪除一個文件。
例子創建ramdisk
代碼如下:
#!/bin/bash
# ramdisk.sh
# "ramdisk"是系統RAM內存的一段,
#+ 它可以被當成是一個文件系統來操作.
# 它的優點是存取速度非常快 (包括讀和寫).
# 缺點: 易失性, 當計算機重啟或關機時會丟失數據.
#+ 會減少系統可用的RAM.
# 10 # 那麼ramdisk有什麼作用呢?
# 保存一個較大的數據集在ramdisk, 比如一張表或字典,
#+ 這樣可以加速數據查詢, 因為在內存裡查找比在磁盤裡查找快得多.
E_NON_ROOT_USER=70 # 必須用root來運行.
ROOTUSER_NAME=root
MOUNTPT=/mnt/ramdisk
SIZE=2000 # 2K 個塊 (可以合適的做修改)
BLOCKSIZE=1024 # 每塊有1K (1024 byte) 的大小
DEVICE=/dev/ram0 # 第一個 ram 設備
username=`id -nu`
if [ "$username" != "$ROOTUSER_NAME" ]
then
echo "Must be root to run "`basename $0`"."
exit $E_NON_ROOT_USER
fi
if [ ! -d "$MOUNTPT" ] # 測試掛載點是否已經存在了,
then #+ 如果這個腳本已經運行了好幾次了就不會再建這個目錄了
mkdir $MOUNTPT #+ 因為前面已經建立了.
fi
dd if=/dev/zero of=$DEVICE count=$SIZE bs=$BLOCKSIZE
# 把RAM設備的內容用零填充.
# 為何需要這麼做?
mke2fs $DEVICE # 在RAM設備上創建一個ext2文件系統.
mount $DEVICE $MOUNTPT # 掛載設備.
chmod 777 $MOUNTPT # 使普通用戶也可以存取這個ramdisk.
# 但是, 只能由root來缷載它.
echo ""$MOUNTPT" now available for use."
# 現在 ramdisk 即使普通用戶也可以用來存取文件了.
# 注意, ramdisk是易失的, 所以當計算機系統重啟或關機時ramdisk裡的內容會消失.
# 拷貝所有你想保存文件到一個常規的磁盤目錄下.
# 重啟之後, 運行這個腳本再次建立起一個 ramdisk.
# 僅重新加載 /mnt/ramdisk 而沒有其他的步驟將不會正確工作.
# 如果加以改進, 這個腳本可以放在 /etc/rc.d/rc.local,
#+ 以使系統啟動時能自動設立一個ramdisk.
# 這樣很合適速度要求高的數據庫服務器.
exit 0
四、查看dd的拷貝進度
linux中的DD命令可以很方便的作二進制拷貝,比如可以做硬盤克隆。
一般使用方式如下:
代碼如下:
dd if=/src/device/name of=/dst/device/name
... 然後就等它完成,進程退出
但是當我們需要copy的東西很巨大的時候,這個過程是很痛苦的
很多人會查看iostat, 來估算大概需要多少時間完成, 這是很不直觀的, 也不可靠
如果我們dd --help
會看到其實是有方法可以查看copy進度的, 幫助文件中的example如下:
代碼如下:
$ dd if=/dev/zero of=/dev/null& pid=$! 後台運行dd測試,保存進程號到pid中
實際我們使用的時候可以新開一個終端,
代碼如下:
ps -ef | grep dd
找到dd的PID, 然後發送USR1(用戶自定義信號),查看copy進度
有些場合我們可能使用當前這個終端, 那麼我們可以把當前運行的dd轉到後台:ctrl+z, 這時候dd進程被stop了,使用bg %1讓其在後台繼續運行,並且編為1號,後面如果要它到前台運行,只要鍵入fg %1就可以了.
然後我們輸入kill -USR1 PID, 這裡的PID是前面用ps查看到的進程號
這時候你就能看到當前的copy信息了,以及平均copy速度