萬盛學電腦網

 萬盛學電腦網 >> 服務器教程 >> Linux系統的dd命令使用教程

Linux系統的dd命令使用教程

   一、基礎用法

  dd:用指定大小的塊拷貝一個文件,並在拷貝的同時進行指定的轉換。

  注意:指定數字的地方若以下列字符結尾,則乘以相應的數字:b=512;c=1;k=1024;w=2

  參數注釋:

  if=文件名:輸入文件名,缺省為標准輸入。即指定源文件。< if=input file >

  of=文件名:輸出文件名,缺省為標准輸出。即指定目的文件。< of=output file >

  ibs=bytes:一次讀入bytes個字節,即指定一個塊大小為bytes個字節。

  obs=bytes:一次輸出bytes個字節,即指定一個塊大小為bytes個字節。

  bs=bytes:同時設置讀入/輸出的塊大小為bytes個字節。

  cbs=bytes:一次轉換bytes個字節,即指定轉換緩沖區大小。

  skip=blocks:從輸入文件開頭跳過blocks個塊後再開始復制。

  seek=blocks:從輸出文件開頭跳過blocks個塊後再開始復制。

  注意:通常只用當輸出文件是磁盤或磁帶時才有效,即備份到磁盤或磁帶時才有效。

  count=blocks:僅拷貝blocks個塊,塊大小等於ibs指定的字節數。

  conv=conversion:用指定的參數轉換文件。

  ascii:轉換ebcdic為ascii

  ebcdic:轉換ascii為ebcdic

  ibm:轉換ascii為alternate ebcdic

  block:把每一行轉換為長度為cbs,不足部分用空格填充

  unblock:使每一行的長度都為cbs,不足部分用空格填充

  lcase:把大寫字符轉換為小寫字符

  ucase:把小寫字符轉換為大寫字符

  swab:交換輸入的每對字節

  noerror:出錯時不停止

  notrunc:不截短輸出文件

  sync:將每個輸入塊填充到ibs個字節,不足部分用空(NUL)字符補齊。

  二、dd應用實例

  1.將本地的/dev/hdb整盤備份到/dev/hdd

  代碼如下:

  heng@me: dd if=/dev/hdb of=/dev/hdd

  2.將/dev/hdb全盤數據備份到指定路徑的image文件

  代碼如下:

  heng@me: dd if=/dev/hdb of=/root/image

  3.將備份文件恢復到指定盤

  代碼如下:

  heng@me: dd if=/root/image of=/dev/hdb

  4.備份/dev/hdb全盤數據,並利用gzip工具進行壓縮,保存到指定路徑

  代碼如下:

  heng@me: dd if=/dev/hdb | gzip > /root/image.gz

  5.將壓縮的備份文件恢復到指定盤

  代碼如下:

  heng@me: gzip -dc /root/image.gz | dd of=/dev/hdb

  6.備份與恢復MBR

  備份磁盤開始的512個字節大小的MBR信息到指定文件:

  代碼如下:

  heng@me: dd if=/dev/hda of=/root/image count=1 bs=512

  count=1指僅拷貝一個塊;bs=512指塊大小為512個字節。

  恢復:

  代碼如下:

  heng@me: dd if=/root/image of=/dev/had

  將備份的MBR信息寫到磁盤開始部分

  7.備份軟盤

  代碼如下:

  heng@me: dd if=/dev/fd0 of=disk.img count=1 bs=1440k (即塊大小為1.44M)

  8.拷貝內存內容到硬盤

  代碼如下:

  heng@me: dd if=/dev/mem of=/root/mem.bin bs=1024 (指定塊大小為1k)

  9.拷貝光盤內容到指定文件夾,並保存為cd.iso文件

  代碼如下:

  heng@me: dd if=/dev/cdrom(hdc) of=/root/cd.iso

  10.增加swap分區文件大小

  第一步:創建一個大小為256M的文件:

  代碼如下:

  heng@me: dd if=/dev/zero of=/swapfile bs=1024 count=262144

  第二步:把這個文件變成swap文件:

  代碼如下:

  heng@me: mkswap /swapfile

  第三步:啟用這個swap文件:

  代碼如下:

  heng@me: swapon /swapfile

  第四步:編輯/etc/fstab文件,使在每次開機時自動加載swap文件:

  代碼如下:

  /swapfile swap swap default 0 0

  11.銷毀磁盤數據

  代碼如下:

  heng@me: dd if=/dev/urandom of=/dev/hda1

  注意:利用隨機的數據填充硬盤,在某些必要的場合可以用來銷毀數據。

  12.測試硬盤的讀寫速度

  代碼如下:

  heng@me: dd if=/dev/zero bs=1024 count=1000000 of=/root/1Gb.file

  heng@me: dd if=/root/1Gb.file bs=64k | dd of=/dev/null

  通過以上兩個命令輸出的命令執行時間,可以計算出硬盤的讀、寫速度。

  13.確定硬盤的最佳塊大小:

  代碼如下:

  heng@me: dd if=/dev/zero bs=1024 count=1000000 of=/root/1Gb.file

  heng@me: dd if=/dev/zero bs=2048 count=500000 of=/root/1Gb.file

  heng@me: dd if=/dev/zero bs=4096 count=250000 of=/root/1Gb.file

  heng@me: dd if=/dev/zero bs=8192 count=125000 of=/root/1Gb.file

  通過比較以上命令輸出中所顯示的命令執行時間,即可確定系統最佳的塊大小。

  14.修復硬盤:

  代碼如下:

  heng@me: dd if=/dev/sda of=/dev/sda 或dd if=/dev/hda of=/dev/hda

  當硬盤較長時間(一年以上)放置不使用後,磁盤上會產生magnetic flux point,當磁頭讀到這些區域時會遇到困難,並可能導致I/O錯誤。當這種情況影響到硬盤的第一個扇區時,可能導致硬盤報廢。上邊的命令有可能使這些數 據起死回生。並且這個過程是安全、高效的。

  15.利用netcat遠程備份

  代碼如下:

  heng@me: dd if=/dev/hda bs=16065b | netcat < targethost-IP > 1234

  在源主機上執行此命令備份/dev/hda

  代碼如下:

  heng@me: netcat -l -p 1234 | dd of=/dev/hdc bs=16065b

  在目的主機上執行此命令來接收數據並寫入/dev/hdc

  代碼如下:

  heng@me: netcat -l -p 1234 | bzip2 > partition.img

  heng@me: netcat -l -p 1234 | gzip > partition.img

  以上兩條指令是目的主機指令的變化分別采用bzip2、gzip對數據進行壓縮,並將備份文件保存在當前目錄。

  16.將一個很大的視頻文件中的第i個字節的值改成0x41(也就是大寫字母A的ASCII值)

  代碼如下:

  echo A | dd of=bigfile seek=$i bs=1 count=1 conv=notrunc

  三、/dev/null和/dev/zero的區別

  /dev/null,外號叫無底洞,你可以向它輸出任何數據,它通吃,並且不會撐著!

  /dev/zero,是一個輸入設備,你可你用它來初始化文件。該設備無窮盡地提供0,可以使用任何你需要的數目——設備提供的要多的多。他可以用於向設備或文件寫入字符串0。

  /dev/null——它是空設備,也稱為位桶(bit bucket)。任何寫入它的輸出都會被拋棄。如果不想讓消息以標准輸出顯示或寫入文件,那麼可以將消息重定向到位桶。

  代碼如下:

  heng@me:if=/dev/zero of=./test.txt bs=1k count=1

  heng@me:ls –l

  total 4

  -rw-r--r-- 1 oracle dba 1024 Jul 15 16:56 test.txt

  heng@me:find / -name access_log 2>/dev/null

  1使用/dev/null

  把/dev/null看作”黑洞”, 它等價於一個只寫文件,所有寫入它的內容都會永遠丟失.,而嘗試從它那兒讀取內容則什麼也讀不到。然而, /dev/null對命令行和腳本都非常的有用

  禁止標准輸出

  代碼如下:

  heng@me:cat $filename >/dev/null #文件內容丟失,而不會輸出到標准輸出.

  禁止標准錯誤

  代碼如下:

  heng@me:rm $badname 2>/dev/null #這樣錯誤信息[標准錯誤]就被丟到太平洋去了

  禁止標准輸出和標准錯誤的輸出

  代碼如下:

  heng@me:cat $filename 2>/dev/null >/dev/null

  如果”$filename”不存在,將不會有任何錯誤信息提示;如果”$filename”存在, 文件的內容不會打印到標准輸出。因此,上面的代碼根本不會輸出任何信息。當只想測試命令的退出碼而不想有任何輸出時非常有用。

  2使用/dev/zero

  像/dev/null一樣, /dev/zero也是一個偽文件, 但它實際上產生連續不斷的null的流(二進制的零流,而不是ASCII型的)。 寫入它的輸出會丟失不見, 而從/dev/zero讀出一連串的null也比較困難, 雖然這也能通過od或一個十六進制編輯器來做到。

  /dev/zero主要的用處是用來創建一個指定長度用於初始化的空文件,就像臨時交換文件。

  用/dev/zero創建一個交換臨時文件

  代碼如下:

  #!/bin/bash

  # 創建一個交換文件.

  ROOT_UID=0 # Root 用戶的 $UID 是 0.

  E_WRONG_USER=65 # 不是 root?

  FILE=/swap

  BLOCKSIZE=1024

  MINBLOCKS=40

  SUCCESS=0

  # 這個腳本必須用root來運行.

  if [ "$UID" -ne "$ROOT_UID" ]

  then

  echo; echo "You must be root to run this script."; echo

  exit $E_WRONG_USER

  fi

  blocks=${1:-$MINBLOCKS} # 如果命令行沒有指定,

  #+ 則設置為默認的40塊.

  # 上面這句等同如:

  # --------------------------------------------------

  # if [ -n "$1" ]

  # then

  # blocks=$1

  # else

  # blocks=$MINBLOCKS

  # fi

  # --------------------------------------------------

  if [ "$blocks" -lt $MINBLOCKS ]

  then

  blocks=$MINBLOCKS # 最少要有 40 個塊長.

  fi

  echo "Creating swap file of size $blocks blocks (KB)."

  dd if=/dev/zero of=$FILE bs=$BLOCKSIZE count=$blocks # 把零寫入文件.

  mkswap $FILE $blocks # 將此文件建為交換文件(或稱交換分區).

  swapon $FILE # 激活交換文件.

  echo "Swap file created and activated."

  exit $SUCCESS

  關於 /dev/zero 的另一個應用是為特定的目的而用零去填充一個指定大小的文件, 如掛載一個文件系統到環回設備 (loopback device)或"安全地" 刪除一個文件。

  例子創建ramdisk

  代碼如下:

  #!/bin/bash

  # ramdisk.sh

  # "ramdisk"是系統RAM內存的一段,

  #+ 它可以被當成是一個文件系統來操作.

  # 它的優點是存取速度非常快 (包括讀和寫).

  # 缺點: 易失性, 當計算機重啟或關機時會丟失數據.

  #+ 會減少系統可用的RAM.

  # 10 # 那麼ramdisk有什麼作用呢?

  # 保存一個較大的數據集在ramdisk, 比如一張表或字典,

  #+ 這樣可以加速數據查詢, 因為在內存裡查找比在磁盤裡查找快得多.

  E_NON_ROOT_USER=70 # 必須用root來運行.

  ROOTUSER_NAME=root

  MOUNTPT=/mnt/ramdisk

  SIZE=2000 # 2K 個塊 (可以合適的做修改)

  BLOCKSIZE=1024 # 每塊有1K (1024 byte) 的大小

  DEVICE=/dev/ram0 # 第一個 ram 設備

  username=`id -nu`

  if [ "$username" != "$ROOTUSER_NAME" ]

  then

  echo "Must be root to run "`basename $0`"."

  exit $E_NON_ROOT_USER

  fi

  if [ ! -d "$MOUNTPT" ] # 測試掛載點是否已經存在了,

  then #+ 如果這個腳本已經運行了好幾次了就不會再建這個目錄了

  mkdir $MOUNTPT #+ 因為前面已經建立了.

  fi

  dd if=/dev/zero of=$DEVICE count=$SIZE bs=$BLOCKSIZE

  # 把RAM設備的內容用零填充.

  # 為何需要這麼做?

  mke2fs $DEVICE # 在RAM設備上創建一個ext2文件系統.

  mount $DEVICE $MOUNTPT # 掛載設備.

  chmod 777 $MOUNTPT # 使普通用戶也可以存取這個ramdisk.

  # 但是, 只能由root來缷載它.

  echo ""$MOUNTPT" now available for use."

  # 現在 ramdisk 即使普通用戶也可以用來存取文件了.

  # 注意, ramdisk是易失的, 所以當計算機系統重啟或關機時ramdisk裡的內容會消失.

  # 拷貝所有你想保存文件到一個常規的磁盤目錄下.

  # 重啟之後, 運行這個腳本再次建立起一個 ramdisk.

  # 僅重新加載 /mnt/ramdisk 而沒有其他的步驟將不會正確工作.

  # 如果加以改進, 這個腳本可以放在 /etc/rc.d/rc.local,

  #+ 以使系統啟動時能自動設立一個ramdisk.

  # 這樣很合適速度要求高的數據庫服務器.

  exit 0

  四、查看dd的拷貝進度

  linux中的DD命令可以很方便的作二進制拷貝,比如可以做硬盤克隆。

  一般使用方式如下:

  代碼如下:

  dd if=/src/device/name of=/dst/device/name

  ... 然後就等它完成,進程退出

  但是當我們需要copy的東西很巨大的時候,這個過程是很痛苦的

  很多人會查看iostat, 來估算大概需要多少時間完成, 這是很不直觀的, 也不可靠

  如果我們dd --help

  會看到其實是有方法可以查看copy進度的, 幫助文件中的example如下:

  代碼如下:

  $ dd if=/dev/zero of=/dev/null& pid=$! 後台運行dd測試,保存進程號到pid中

  實際我們使用的時候可以新開一個終端,

  代碼如下:

  

ps -ef | grep dd

 

  找到dd的PID, 然後發送USR1(用戶自定義信號),查看copy進度

  有些場合我們可能使用當前這個終端, 那麼我們可以把當前運行的dd轉到後台:ctrl+z, 這時候dd進程被stop了,使用bg %1讓其在後台繼續運行,並且編為1號,後面如果要它到前台運行,只要鍵入fg %1就可以了.

  然後我們輸入kill -USR1 PID, 這裡的PID是前面用ps查看到的進程號

  這時候你就能看到當前的copy信息了,以及平均copy速度

copyright © 萬盛學電腦網 all rights reserved