一、基礎(chǔ)用法
dd:用指定大小的塊拷貝一個(gè)文件,并在拷貝的同時(shí)進(jìn)行指定的轉(zhuǎn)換。
注意:指定數(shù)字的地方若以下列字符結(jié)尾,則乘以相應(yīng)的數(shù)字:b=512;c=1;k=1024;w=2
參數(shù)注釋?zhuān)?br />
if=文件名:輸入文件名,缺省為標(biāo)準(zhǔn)輸入。即指定源文件。 if=input file >
of=文件名:輸出文件名,缺省為標(biāo)準(zhǔn)輸出。即指定目的文件。 of=output file >
ibs=bytes:一次讀入bytes個(gè)字節(jié),即指定一個(gè)塊大小為bytes個(gè)字節(jié)。
obs=bytes:一次輸出bytes個(gè)字節(jié),即指定一個(gè)塊大小為bytes個(gè)字節(jié)。
bs=bytes:同時(shí)設(shè)置讀入/輸出的塊大小為bytes個(gè)字節(jié)。
cbs=bytes:一次轉(zhuǎn)換bytes個(gè)字節(jié),即指定轉(zhuǎn)換緩沖區(qū)大小。
skip=blocks:從輸入文件開(kāi)頭跳過(guò)blocks個(gè)塊后再開(kāi)始復(fù)制。
seek=blocks:從輸出文件開(kāi)頭跳過(guò)blocks個(gè)塊后再開(kāi)始復(fù)制。
注意:通常只用當(dāng)輸出文件是磁盤(pán)或磁帶時(shí)才有效,即備份到磁盤(pán)或磁帶時(shí)才有效。
count=blocks:僅拷貝blocks個(gè)塊,塊大小等于ibs指定的字節(jié)數(shù)。
conv=conversion:用指定的參數(shù)轉(zhuǎn)換文件。
ascii:轉(zhuǎn)換ebcdic為ascii
ebcdic:轉(zhuǎn)換ascii為ebcdic
ibm:轉(zhuǎn)換ascii為alternate ebcdic
block:把每一行轉(zhuǎn)換為長(zhǎng)度為cbs,不足部分用空格填充
unblock:使每一行的長(zhǎng)度都為cbs,不足部分用空格填充
lcase:把大寫(xiě)字符轉(zhuǎn)換為小寫(xiě)字符
ucase:把小寫(xiě)字符轉(zhuǎn)換為大寫(xiě)字符
swab:交換輸入的每對(duì)字節(jié)
noerror:出錯(cuò)時(shí)不停止
notrunc:不截短輸出文件
sync:將每個(gè)輸入塊填充到ibs個(gè)字節(jié),不足部分用空(NUL)字符補(bǔ)齊。
二、dd應(yīng)用實(shí)例
1.將本地的/dev/hdb整盤(pán)備份到/dev/hdd
heng@me: dd if=/dev/hdb of=/dev/hdd
2.將/dev/hdb全盤(pán)數(shù)據(jù)備份到指定路徑的image文件
heng@me: dd if=/dev/hdb of=/root/image
3.將備份文件恢復(fù)到指定盤(pán)
heng@me: dd if=/root/image of=/dev/hdb
4.備份/dev/hdb全盤(pán)數(shù)據(jù),并利用gzip工具進(jìn)行壓縮,保存到指定路徑
heng@me: dd if=/dev/hdb | gzip > /root/image.gz
5.將壓縮的備份文件恢復(fù)到指定盤(pán)
heng@me: gzip -dc /root/image.gz | dd of=/dev/hdb
6.備份與恢復(fù)MBR
備份磁盤(pán)開(kāi)始的512個(gè)字節(jié)大小的MBR信息到指定文件:
heng@me: dd if=/dev/hda of=/root/image count=1 bs=512
count=1指僅拷貝一個(gè)塊;bs=512指塊大小為512個(gè)字節(jié)。
恢復(fù):
heng@me: dd if=/root/image of=/dev/had
將備份的MBR信息寫(xiě)到磁盤(pán)開(kāi)始部分
7.備份軟盤(pán)
heng@me: dd if=/dev/fd0 of=disk.img count=1 bs=1440k (即塊大小為1.44M)
8.拷貝內(nèi)存內(nèi)容到硬盤(pán)
heng@me: dd if=/dev/mem of=/root/mem.bin bs=1024 (指定塊大小為1k)
9.拷貝光盤(pán)內(nèi)容到指定文件夾,并保存為cd.iso文件
heng@me: dd if=/dev/cdrom(hdc) of=/root/cd.iso
10.增加swap分區(qū)文件大小
第一步:創(chuàng)建一個(gè)大小為256M的文件:
heng@me: dd if=/dev/zero of=/swapfile bs=1024 count=262144
第二步:把這個(gè)文件變成swap文件:
heng@me: mkswap /swapfile
第三步:?jiǎn)⒂眠@個(gè)swap文件:
heng@me: swapon /swapfile
第四步:編輯/etc/fstab文件,使在每次開(kāi)機(jī)時(shí)自動(dòng)加載swap文件:
/swapfile swap swap default 0 0
11.銷(xiāo)毀磁盤(pán)數(shù)據(jù)
heng@me: dd if=/dev/urandom of=/dev/hda1
注意:利用隨機(jī)的數(shù)據(jù)填充硬盤(pán),在某些必要的場(chǎng)合可以用來(lái)銷(xiāo)毀數(shù)據(jù)。
12.測(cè)試硬盤(pán)的讀寫(xiě)速度
heng@me: dd if=/dev/zero bs=1024 count=1000000 of=/root/1Gb.file
heng@me: dd if=/root/1Gb.file bs=64k | dd of=/dev/null
通過(guò)以上兩個(gè)命令輸出的命令執(zhí)行時(shí)間,可以計(jì)算出硬盤(pán)的讀、寫(xiě)速度。
13.確定硬盤(pán)的最佳塊大小:
heng@me: dd if=/dev/zero bs=1024 count=1000000 of=/root/1Gb.file
heng@me: dd if=/dev/zero bs=2048 count=500000 of=/root/1Gb.file
heng@me: dd if=/dev/zero bs=4096 count=250000 of=/root/1Gb.file
heng@me: dd if=/dev/zero bs=8192 count=125000 of=/root/1Gb.file
通過(guò)比較以上命令輸出中所顯示的命令執(zhí)行時(shí)間,即可確定系統(tǒng)最佳的塊大小。
14.修復(fù)硬盤(pán):
heng@me: dd if=/dev/sda of=/dev/sda 或dd if=/dev/hda of=/dev/hda
當(dāng)硬盤(pán)較長(zhǎng)時(shí)間(一年以上)放置不使用后,磁盤(pán)上會(huì)產(chǎn)生magnetic flux point,當(dāng)磁頭讀到這些區(qū)域時(shí)會(huì)遇到困難,并可能導(dǎo)致I/O錯(cuò)誤。當(dāng)這種情況影響到硬盤(pán)的第一個(gè)扇區(qū)時(shí),可能導(dǎo)致硬盤(pán)報(bào)廢。上邊的命令有可能使這些數(shù) 據(jù)起死回生。并且這個(gè)過(guò)程是安全、高效的。
15.利用netcat遠(yuǎn)程備份
heng@me: dd if=/dev/hda bs=16065b | netcat targethost-IP > 1234
在源主機(jī)上執(zhí)行此命令備份/dev/hda
heng@me: netcat -l -p 1234 | dd of=/dev/hdc bs=16065b
在目的主機(jī)上執(zhí)行此命令來(lái)接收數(shù)據(jù)并寫(xiě)入/dev/hdc
heng@me: netcat -l -p 1234 | bzip2 > partition.img
heng@me: netcat -l -p 1234 | gzip > partition.img
以上兩條指令是目的主機(jī)指令的變化分別采用bzip2、gzip對(duì)數(shù)據(jù)進(jìn)行壓縮,并將備份文件保存在當(dāng)前目錄。
16.將一個(gè)很大的視頻文件中的第i個(gè)字節(jié)的值改成0x41(也就是大寫(xiě)字母A的ASCII值)
echo A | dd of=bigfile seek=$i bs=1 count=1 conv=notrunc
三、/dev/null和/dev/zero的區(qū)別
/dev/null,外號(hào)叫無(wú)底洞,你可以向它輸出任何數(shù)據(jù),它通吃,并且不會(huì)撐著!
/dev/zero,是一個(gè)輸入設(shè)備,你可你用它來(lái)初始化文件。該設(shè)備無(wú)窮盡地提供0,可以使用任何你需要的數(shù)目——設(shè)備提供的要多的多。他可以用于向設(shè)備或文件寫(xiě)入字符串0。
/dev/null——它是空設(shè)備,也稱(chēng)為位桶(bit bucket)。任何寫(xiě)入它的輸出都會(huì)被拋棄。如果不想讓消息以標(biāo)準(zhǔn)輸出顯示或?qū)懭胛募敲纯梢詫⑾⒅囟ㄏ虻轿煌啊?br />
heng@me:if=/dev/zero of=./test.txt bs=1k count=1
heng@me:ls –l
total 4
-rw-r--r-- 1 oracle dba 1024 Jul 15 16:56 test.txt
heng@me:find / -name access_log 2>/dev/null
1使用/dev/null
把/dev/null看作”黑洞”, 它等價(jià)于一個(gè)只寫(xiě)文件,所有寫(xiě)入它的內(nèi)容都會(huì)永遠(yuǎn)丟失.,而嘗試從它那兒讀取內(nèi)容則什么也讀不到。然而, /dev/null對(duì)命令行和腳本都非常的有用
禁止標(biāo)準(zhǔn)輸出
heng@me:cat $filename >/dev/null #文件內(nèi)容丟失,而不會(huì)輸出到標(biāo)準(zhǔn)輸出.
禁止標(biāo)準(zhǔn)錯(cuò)誤
heng@me:rm $badname 2>/dev/null #這樣錯(cuò)誤信息[標(biāo)準(zhǔn)錯(cuò)誤]就被丟到太平洋去了
禁止標(biāo)準(zhǔn)輸出和標(biāo)準(zhǔn)錯(cuò)誤的輸出
heng@me:cat $filename 2>/dev/null >/dev/null
如果”$filename”不存在,將不會(huì)有任何錯(cuò)誤信息提示;如果”$filename”存在, 文件的內(nèi)容不會(huì)打印到標(biāo)準(zhǔn)輸出。因此,上面的代碼根本不會(huì)輸出任何信息。當(dāng)只想測(cè)試命令的退出碼而不想有任何輸出時(shí)非常有用。
2使用/dev/zero
像/dev/null一樣, /dev/zero也是一個(gè)偽文件, 但它實(shí)際上產(chǎn)生連續(xù)不斷的null的流(二進(jìn)制的零流,而不是ASCII型的)。 寫(xiě)入它的輸出會(huì)丟失不見(jiàn), 而從/dev/zero讀出一連串的null也比較困難, 雖然這也能通過(guò)od或一個(gè)十六進(jìn)制編輯器來(lái)做到。
/dev/zero主要的用處是用來(lái)創(chuàng)建一個(gè)指定長(zhǎng)度用于初始化的空文件,就像臨時(shí)交換文件。
用/dev/zero創(chuàng)建一個(gè)交換臨時(shí)文件
#!/bin/bash
# 創(chuàng)建一個(gè)交換文件.
ROOT_UID=0 # Root 用戶的 $UID 是 0.
E_WRONG_USER=65 # 不是 root?
FILE=/swap
BLOCKSIZE=1024
MINBLOCKS=40
SUCCESS=0
# 這個(gè)腳本必須用root來(lái)運(yùn)行.
if [ "$UID" -ne "$ROOT_UID" ]
then
echo; echo "You must be root to run this script."; echo
exit $E_WRONG_USER
fi
blocks=${1:-$MINBLOCKS} # 如果命令行沒(méi)有指定,
#+ 則設(shè)置為默認(rèn)的40塊.
# 上面這句等同如:
# --------------------------------------------------
# if [ -n "$1" ]
# then
# blocks=$1
# else
# blocks=$MINBLOCKS
# fi
# --------------------------------------------------
if [ "$blocks" -lt $MINBLOCKS ]
then
blocks=$MINBLOCKS # 最少要有 40 個(gè)塊長(zhǎng).
fi
echo "Creating swap file of size $blocks blocks (KB)."
dd if=/dev/zero of=$FILE bs=$BLOCKSIZE count=$blocks # 把零寫(xiě)入文件.
mkswap $FILE $blocks # 將此文件建為交換文件(或稱(chēng)交換分區(qū)).
swapon $FILE # 激活交換文件.
echo "Swap file created and activated."
exit $SUCCESS
關(guān)于 /dev/zero 的另一個(gè)應(yīng)用是為特定的目的而用零去填充一個(gè)指定大小的文件, 如掛載一個(gè)文件系統(tǒng)到環(huán)回設(shè)備 (loopback device)或"安全地" 刪除一個(gè)文件。
例子創(chuàng)建ramdisk
#!/bin/bash
# ramdisk.sh
# "ramdisk"是系統(tǒng)RAM內(nèi)存的一段,
#+ 它可以被當(dāng)成是一個(gè)文件系統(tǒng)來(lái)操作.
# 它的優(yōu)點(diǎn)是存取速度非???(包括讀和寫(xiě)).
# 缺點(diǎn): 易失性, 當(dāng)計(jì)算機(jī)重啟或關(guān)機(jī)時(shí)會(huì)丟失數(shù)據(jù).
#+ 會(huì)減少系統(tǒng)可用的RAM.
# 10 # 那么ramdisk有什么作用呢?
# 保存一個(gè)較大的數(shù)據(jù)集在ramdisk, 比如一張表或字典,
#+ 這樣可以加速數(shù)據(jù)查詢(xún), 因?yàn)樵趦?nèi)存里查找比在磁盤(pán)里查找快得多.
E_NON_ROOT_USER=70 # 必須用root來(lái)運(yùn)行.
ROOTUSER_NAME=root
MOUNTPT=/mnt/ramdisk
SIZE=2000 # 2K 個(gè)塊 (可以合適的做修改)
BLOCKSIZE=1024 # 每塊有1K (1024 byte) 的大小
DEVICE=/dev/ram0 # 第一個(gè) ram 設(shè)備
username=`id -nu`
if [ "$username" != "$ROOTUSER_NAME" ]
then
echo "Must be root to run "`basename $0`"."
exit $E_NON_ROOT_USER
fi
if [ ! -d "$MOUNTPT" ] # 測(cè)試掛載點(diǎn)是否已經(jīng)存在了,
then #+ 如果這個(gè)腳本已經(jīng)運(yùn)行了好幾次了就不會(huì)再建這個(gè)目錄了
mkdir $MOUNTPT #+ 因?yàn)榍懊嬉呀?jīng)建立了.
fi
dd if=/dev/zero of=$DEVICE count=$SIZE bs=$BLOCKSIZE
# 把RAM設(shè)備的內(nèi)容用零填充.
# 為何需要這么做?
mke2fs $DEVICE # 在RAM設(shè)備上創(chuàng)建一個(gè)ext2文件系統(tǒng).
mount $DEVICE $MOUNTPT # 掛載設(shè)備.
chmod 777 $MOUNTPT # 使普通用戶也可以存取這個(gè)ramdisk.
# 但是, 只能由root來(lái)缷載它.
echo ""$MOUNTPT" now available for use."
# 現(xiàn)在 ramdisk 即使普通用戶也可以用來(lái)存取文件了.
# 注意, ramdisk是易失的, 所以當(dāng)計(jì)算機(jī)系統(tǒng)重啟或關(guān)機(jī)時(shí)ramdisk里的內(nèi)容會(huì)消失.
# 拷貝所有你想保存文件到一個(gè)常規(guī)的磁盤(pán)目錄下.
# 重啟之后, 運(yùn)行這個(gè)腳本再次建立起一個(gè) ramdisk.
# 僅重新加載 /mnt/ramdisk 而沒(méi)有其他的步驟將不會(huì)正確工作.
# 如果加以改進(jìn), 這個(gè)腳本可以放在 /etc/rc.d/rc.local,
#+ 以使系統(tǒng)啟動(dòng)時(shí)能自動(dòng)設(shè)立一個(gè)ramdisk.
# 這樣很合適速度要求高的數(shù)據(jù)庫(kù)服務(wù)器.
exit 0
四、查看dd的拷貝進(jìn)度
linux中的DD命令可以很方便的作二進(jìn)制拷貝,比如可以做硬盤(pán)克隆。
一般使用方式如下:
dd if=/src/device/name of=/dst/device/name
... 然后就等它完成,進(jìn)程退出
但是當(dāng)我們需要copy的東西很巨大的時(shí)候,這個(gè)過(guò)程是很痛苦的
很多人會(huì)查看iostat, 來(lái)估算大概需要多少時(shí)間完成, 這是很不直觀的, 也不可靠
如果我們dd --help
會(huì)看到其實(shí)是有方法可以查看copy進(jìn)度的, 幫助文件中的example如下:
$ dd if=/dev/zero of=/dev/null pid=$! 后臺(tái)運(yùn)行dd測(cè)試,保存進(jìn)程號(hào)到pid中
實(shí)際我們使用的時(shí)候可以新開(kāi)一個(gè)終端,
div class="codeText">ps -ef | grep dd/div>
找到dd的PID, 然后發(fā)送USR1(用戶自定義信號(hào)),查看copy進(jìn)度
有些場(chǎng)合我們可能使用當(dāng)前這個(gè)終端, 那么我們可以把當(dāng)前運(yùn)行的dd轉(zhuǎn)到后臺(tái):ctrl+z, 這時(shí)候dd進(jìn)程被stop了,使用bg %1讓其在后臺(tái)繼續(xù)運(yùn)行,并且編為1號(hào),后面如果要它到前臺(tái)運(yùn)行,只要鍵入fg %1就可以了.
然后我們輸入kill -USR1 PID, 這里的PID是前面用ps查看到的進(jìn)程號(hào)
這時(shí)候你就能看到當(dāng)前的copy信息了,以及平均copy速度