Linux dd --拷贝并转换格式

Linux中DD命令详解

1.dd命令简介

功能：把指定的输入文件拷贝到指定的输出文件中，并且在拷贝过程中可以进行格式转换。可以用该命令实现DOS下的diskcopy命令的作用。先用dd命令把软盘上的数据写成硬盘的一个寄存文件，再把这个寄存文件写入第二张软盘上，完成diskcopy的功能。需要注意的是，应该将硬盘上的寄存文件用rm命令删除掉。系统默认使用标准输入文件和标准输出文件。

语法：dd [选项]

if=输入文件（或设备名称）。

of=输出文件（或设备名称）。

ibs = bytes一次读取bytes字节，即读入缓冲区的字节数。

skip = blocks跳过读入缓冲区开头的ibs*blocks块。

obs = bytes一次写入bytes字节，即写入缓冲区的字节数。

bs = bytes同时设置读/写缓冲区的字节数（等于设置ibs和obs）。

cbs = byte一次转换bytes字节。

count=blocks只拷贝输入的blocks块。

conv = ASCII把EBCDIC码转换为ASCIl码。

conv = ebcdic把ASCIl码转换为EBCDIC码。

conv = ibm把ASCIl码转换为alternate EBCDIC码。

conv = block把变动位转换成固定字符。

conv = ublock把固定位转换成变动位。

conv = ucase把字母由小写转换为大写。

conv = lcase把字母由大写转换为小写。

conv = notrunc不截短输出文件。

conv = swab交换每一对输入字节。

conv = noerror出错时不停止处理。

conv = sync把每个输入记录的大小都调到ibs的大小（用NUL填充）。

2.实例分析

2.1.数据备份与恢复

2.1.1整盘数据备份与恢复

备份：

dd if=/dev/hdxof=/dev/hdy

将本地的/dev/hdx整盘备份到/dev/hdy

dd if=/dev/hdxof=/path/to/image

将/dev/hdx全盘数据备份到指定路径的image文件

dd if=/dev/hdx |gzip >/path/to/image.gz

备份/dev/hdx全盘数据，并利用gzip工具进行压缩，保存到指定路径

恢复：

dd if=/path/to/imageof=/dev/hdx

将备份文件恢复到指定盘

gzip -dc/path/to/image.gz | dd of=/dev/hdx

将压缩的备份文件恢复到指定盘

2.1.2.利用netcat远程备份

dd if=/dev/hdabs=16065b | netcat < targethost-IP > 1234

在源主机上执行此命令备份/dev/hda

netcat -l -p 1234 |dd of=/dev/hdc bs=16065b

在目的主机上执行此命令来接收数据并写入/dev/hdc

netcat -l -p 1234 |bzip2 > partition.img

netcat -l -p 1234 | gzip >partition.img

以上两条指令是目的主机指令的变化分别采用bzip2gzip对数据进行压缩，并将备份文件保存在当前目录。

2.1.3.备份MBR

备份：

dd if=/dev/hdxof=/path/to/image count=1 bs=512

备份磁盘开始的512Byte大小的MBR信息到指定文件

恢复：

dd if=/path/to/imageof=/dev/hdx

将备份的MBR信息写到磁盘开始部分

2.1.4.备份软盘

dd if=/dev/fd0of=disk.img count=1 bs=1440k

将软驱数据备份到当前目录的disk.img文件

2.1.5.拷贝内存资料到硬盘

dd if=/dev/memof=/root/mem.bin bs=1024

将内存里的数据拷贝到root目录下的mem.bin文件

2.1.6.从光盘拷贝iso镜像

dd if=/dev/cdromof=/root/cd.iso

拷贝光盘数据到root文件夹下，并保存为cd.iso文件

2.2.增加Swap分区文件大小

dd if=/dev/zeroof=/swapfile bs=1024 count=262144

创建一个足够大的文件（此处为256M）

mkswap /swapfile

把这个文件变成swap文件

swapon /swapfile

启用这个swap文件

/swapfile swap swapdefaults 0 0

在每次开机的时候自动加载swap文件,需要在 /etc/fstab 文件中增加一行

2.3.销毁磁盘数据

dd if=/dev/urandomof=/dev/hda1

利用随机的数据填充硬盘，在某些必要的场合可以用来销毁数据。执行此操作以后，/dev/hda1将无法挂载，创建和拷贝操作无法执行。

2.4磁盘管理

2.4.1.得到最恰当的blocksize

dd if=/dev/zerobs=1024 count=1000000 of=/root/1Gb.file

dd if=/dev/zero bs=2048count=500000 of=/root/1Gb.file

dd if=/dev/zero bs=4096count=250000 of=/root/1Gb.file

dd if=/dev/zero bs=8192count=125000 of=/root/1Gb.file

通过比较dd指令输出中所显示的命令执行时间，即可确定系统最佳的blocksize大小

2.4.2测试硬盘读写速度

dd if=/root/1Gb.filebs=64k | dd of=/dev/null

dd if=/dev/zeroof=/root/1Gb.file bs=1024 count=1000000

通过上两个命令输出的执行时间，可以计算出测试硬盘的读／写速度

2.4.3.修复硬盘

dd if=/dev/sdaof=/dev/sda

当硬盘较长时间（比如1，2年）放置不使用后，磁盘上会产生magneticfluxpoint。当磁头读到这些区域时会遇到困难，并可能导致I/O错误。当这种情况影响到硬盘的第一个扇区时，可能导致硬盘报废。上边的命令有可能使这些数据起死回生。且这个过程是安全，高效的。

2.4.4.软盘拷贝

要把一张软盘的内容拷贝到另一张软盘上，利用/tmp作为临时存储区。把源盘插入驱动器中，输入下述命令：

$ dd if =/dev/fd0 of= /tmp/tmpfile

拷贝完成后，将源盘从驱动器中取出，把目标盘插入，输入命令：

$ dd if =/tmp/tmpfile of =/dev/fd0

软盘拷贝完成后，应该将临时文件删除：

$ rm/tmp/tmpfile

　

2.4.5.把net.i这个文件写入软盘中，并设定读/写缓冲区的数目。

（注意：软盘中的内容会被完全覆盖掉）

$ dd if = net.i of =/dev/fd0 bs = 16384

　

2.4.6.将文件sfile拷贝到文件dfile中。

$ dd if=sfileof=dfile

虚拟机技术 -把Linux安装在一个文件中（用dd生成虚拟块设备文件）

第一个问题是：什么是虚拟块设备文件？虚拟块设备文件是本人杜撰的一个名称，该类文件在主机操作系统上是普通文件，在虚拟机中作为一个虚拟块设备，也就是虚拟机中的硬盘。在虚拟机中对虚拟块设备的读写，实际都是对主机上该文件的操作。

虚拟块设备文件更通用的名称是硬盘镜像文件(HardDisk Image)，但不是所有的硬盘镜像文件都是虚拟块设备文件，例如，目前Ghost的GHO格式的镜像文件就不能成为虚拟机中的硬盘。

LInux的dd命令，可以用于生成虚拟块设备文件。既可以用于创建空镜像文件，也可以用于创建物理硬盘的镜像。先看一个实际例子：

# dd if=/dev/hdaof=/mnt/nebula/hda_dd.image4757130+0 records in4757130+0 records out

上面这个命令将IDE设备/dev/hda的内容复制到/mnt/nebula/hda_dd.image文件。参数if告诉dd从哪个文件读取数据，参数of告诉dd读出的数据写入哪个文件中。注意，对于dd来说，输入和输出都是文件，dd做的只是文件拷贝工作，这得益于Unix/Linux下面将设备也抽象为特殊的文件。

一般来说设备文件有两种，一种是块设备，一种是字符设备。块设备的特点是可以随机读写（RandomAccess），比如内存、硬盘等。字符设备的特点是顺序读写（Sequential Access），比如鼠标，键盘，麦克风等。

前面说了如何生成物理硬盘的镜像，如果想生成空镜像文件（本文的主要目的），还需要一个特殊的设备。/dev/zero是Linux提供的一个特殊的字符设备，它的特点是可以永远读该文件，每次读取的结果都是二进制0。下面的命令可以生成一个100M的空镜像文件：

dd if=/dev/zeroof=100M.img bs=1M count=100

100+0 records in

100+0 records out

104857600 bytes (105MB) copied, 0.18719 seconds, 560 MB/s

除了前面已经解释的of和if参数，这次又出现了bs和count参数。bs=1M表示每一次读写1M数据，count=100表示读写100次，这样就指定了生成文件的大小为100M。bs参数还可以进一步细分为ibs和obs两种，为读操作与写操作分别指定不同的Buffer大小。

这样就生成100M的空镜像文件，问题是，如果要生成1G的虚拟块设备文件，就得占用1G的硬盘空间，而这个镜像文件完全是空的，是不是有一点浪费？好在Linux支持Sparse（稀疏）文件。请看下面的例子

# dd if=/dev/zeroof=1G.img bs=1M seek=1000 count=0

0+0 records in

0+0 records out

0 bytes (0 B)copied, 3.3e-05 seconds, 0.0 kB/s

# ls -l 1G.img

-rw-r–r– 1 root root1048576000 Mar 25 15:32 1G.img

# du -m 1G.img

1 1G.img

这里用了一个新的命令seek，表示略过1000个Block不写（这里Block按照bs的定义是1M），count=0表示写入0个Block。用ls命令看新生成的文件，大小可以看出是1000M。但是再用du一看，实际占用硬盘大小只有1M。

现在为止已经讲解了如何生成空镜像文件，以及如何利用稀疏文件有效减少镜像文件对磁盘空间的占用。

现在让我们在上面建立文件系统，操作很简单：

mkfs.ext2 1G.img

在这儿我选择了ext2磁盘格式，你也可以根据自己的喜好来做

接下来会提示：is not ablock special device

按y继续，之后就成功在这个文件中建立了文件系统

之后就是挂载文件系统了，

mount 1G.img /mnt/-o loop

这样就可以在/mnt/目录下享受你的块文件了，除了能够像普通磁盘一样操作之外，还限定了它的大小只有1G，连磁盘配额都省了！

虚拟机技术的一大特点是封装性（Encapsulation），说的是将整个操作系统装进在文件系统的一个普通文件中。可以在虚拟机中运行该文件中的操作系统。虚拟机能够提供的诸多好处不是本文的重点，就不多说。

很多人可能熟悉用Ghost生成的系统镜像文件，这和虚拟机使用的操作系统镜像文件类似，只不过前者用于恢复真实机器上的操作系统，或用于快速安装多台真实机器，虽然比重装系统方便，却仍然没有后者可利用虚拟机直接运行来的方便快捷。

总的来说，把Linux安装到一个文件中需要5个步骤