Other

Команда dd linux использует именно такую систему, она сложная, но от этого никуда не деться. Ее придется понять и запомнить. Например, 2b - это 1 килобайт, и 1k, это тоже 1 килобайт, 1М - 1 мегабайт. По умолчанию утилита использует размер блока - 512 байт. Например, чтобы ускорить копирование диска можно брать блоки размером по 5 мегабайт. Для этого применяется такая команда:

$ dd if=/dev/sda of=~/disk.img bs=5M

Следующий параметр - это count. С помощью него можно указать сколько блоков необходимо скопировать. Например, мы можем создать файл размером 512 мегабайт, заполнив его нулями из /dev/zero или случайными цифрами из /dev/random:

$ sudo dd if=/dev/zero of=file.img bs=1M count=512

Обратите внимание, что этот параметр указывает не размер в мегабайтах, а всего лишь количество блоков. Поэтому, если вы укажите размер блока 1b, то для создания файла размером 1Кб нужно взять только два блока. С помощью этого параметра также можно сделать резервную копию таблицы разделов MBR. Для этого скопируем в файл первые 512 байт жесткого диска:

$ sudo dd if=/dev/sda of=mbr.img bs=1b count=1

Для восстановления используйте обычную команду развертывания образа на диск.

Если образ диска слишком большой, можно перенаправить весь вывод нестандартный поток вывода утилиты gzip:

$ dd if =/dev/sda2 | bzip2 disk.img.bz2

Также можно использовать утилиту dd linux для копирования файлов, хотя это и не является ее прямым предназначением:

$ dd if=/home/sergiy/test.txt of=/home/sergiy/test1.txt

Как вы знаете, команда dd linux пишет данные на диск непосредственно в двоичном виде, это значит, что записываются нули и единицы. Они переопределяют то, что было раньше размещено на устройстве для записи. Поэтому чтобы стереть диск вы можете просто забить его нулями из /dev/zero.

$ sudo dd if=/dev/zero of=/dev/sdb

Такое использование dd приводит к тому что весь диск будет полностью стерт.

Примеры использования: Работа с CD/DVD-дисками и образами

Создать образ CD/DVD, используя большой размер блока. Игнорировать ошибки: dd if=/dev/cdrom of=backup.iso bs=65536 conv=noerror

Записать ISO-образ «image.iso» на устройство sdb вместе с его загрузочным сектором и форматированием раздела в файловую систему образа (как правило, ISO 9660 или UDF)(создать загрузочную флеш - например): dd if=image.iso of=/dev/sdb

Работа с файлами

Скопировать файл foo в файл bar: dd if=foo of=bar

Скопировать файл foo в файл bar, пропустив первые 10 КБ из файла foo: dd if=foo of=bar bs=1k skip=10

Порезать 10-мегабайтный файл foo на 2 по 5 МБ: dd if=foo of=bar.0 bs=1M count=5 dd if=foo of=bar.1 bs=1M skip=5

Склеить четыре 100-мегабайтных файла в один:

dd if=SMILE.001 of=SMILE bs=1M seek=0 dd if=SMILE.002 of=SMILE bs=1M seek=100

dd if=SMILE.003 of=SMILE bs=1M seek=200

dd if=SMILE.004 of=SMILE bs=1M seek=300

а можно и так:

dd if=SMILE.001 > SMILE dd if=SMILE.002 >> SMILE

dd if=SMILE.003 >> SMILE

dd if=SMILE.004 >> SMILE

или же (для сбора файла из большого количества кусков):

for i in {1..4}; do dd if=SMILE.00$i >> SMILE

done

Примеры выше показывают возможности dd;

на практике, обычно, используется cat:

cat SMILE.00{1,2,3,4} >> SMILE

Вывести на экран (в /dev/stdout) первые 256 байт файла foo:

dd if=foo of=/dev/stdout bs=128 count=2 или:

dd if=foo bs=128 count=2

Предыдущая команда годится только для просмотра текстового файла. Содержимое бинарного файла рекомендуется смотреть так:

dd if=foo bs=1 count=10 2>/dev/null | hexdump

Команда создания файла подкачки

Введите следующую команду, чтобы создать файл подкачки на 2GB Ubuntu: dd if=/dev/zero of=/swapfile bs=1G count=2

Быстрое создание больших файлов

Иногда нужно быстро что-то проверить (например, создать большой файл). Вы можете сделать это так: dd of=bigfile count=0 bs=1M seek=8000

Эта команда мгновенно создаст большой файл размером 8000MB. Хитрость заключается в том, что это (файл с отверстиями), на самом деле он не занимает пространство. Вы можете увидеть, что пишет команда stat для этого файла, он должен сказать, что 0 блоков выделено для него. При чтении этого файла можно увидеть нули, вы можете также писать в нем. Реальный размер так же будет расти, если мы будем добавлять туда информацию. Не каждая файловая система позволяет создание пустых файлов, вполне возможно, что после выполнения этой команды система на самом деле запишет эти 8000MB нулей в файл, но популярные Linux файловые системы будут работать, как ожидалось.

Резервное копирование и удаление данных

В большинстве случаев следует быть внимательным, чтобы файл назначения не оказался на том же самом диске, с которого снимается образ.

Скопировать один раздел жёсткого диска на другой жёсткий диск, игнорируя ошибки ввода-вывода:

dd if=/dev/sda1 of=/dev/sdb2 bs=4096 conv=noerror,sync

Сделать копию главной загрузочной записи (MBR) первого жёсткого диска:

dd if=/dev/hda of=bootloader.mbr bs=512 count=1

Заполнить всё свободное место в текущем разделе нулями:

dd if=/dev/zero of=zerofill

Создать сжатый образ первого жёсткого диска со всеми разделами (рекомендуется сначала заполнить свободное место нулями для лучшего сжатия):

dd if=/dev/sda | xz -9 > MyFuBu.ISO.XZ

Просмотреть содержимое главной загрузочной записи (MBR) первого жёсткого диска:

dd if=/dev/sda bs=512 count=1 | hexdump -C

Копировать всё, кроме метки, с диска на магнитную ленту:

(dd bs=4k skip=1 count=0 && dd bs=512k) <$disk >$tape

Копировать всё, не перезаписывая метку, с магнитной ленты на диск:

(dd bs=4k seek=1 count=0 && dd bs=512k) <$tape >$disk

Уничтожить содержимое устройства /dev/sdb, заполнив его «нулями» из /dev/zero:

dd if=/dev/zero of=/dev/sdb bs=65536

Узнать статус выполнения операции:

killall -USR1 dd

В некоторых случаях статус выполнения просматривается командой:

pkill -USR1 -x dd

Тестирование производительности чтения / записи дисков

Возможно использовать dd чтобы увидеть, насколько быстро диск/файловая система пишет и читает данные

Эта команда создаст файл x.img размером 64Мб и покажет скорость и время записи time dd if=/dev/zero of=~/Desktop/myimage.img bs=1M count=64 conv=fdatasync

Результат:

$ time dd if=/dev/zero of=~/Desktop/myimage.img bs=1M count=64 conv=fdatasyn

64+0 записей получено

64+0 записей отправлено

67108864 байт (67 MB, 64 MiB) скопирован, 109,919 s, 611 kB/s

real 1m49,957s

user 0m0,010s

sys 0m0,667s

$ ls -l ~/Desktop/myimage.img

-rw-r--r-- 1 user user 64M Nov 12 14:54 /home/user/Desktop/myimage.img

$

Обратите внимание на conv=fdatasyn опцию, которая приводит к синхронизации данных с носителем, поэтому сочетание с командой time вы получите фактическое время записи 64 МБ на диск

Как следить за ходом работы команды dd?

Вариант 1

Использование команды pv

Установить pv и поместить его между входом/выходом команды dd

Из описания пакета:

pv (Pipe Viewer) это инструмент терминала на основе мониторинга прогресса данных через канал.

pv может быть вставлен в любой канал между двумя процессами, чтобы дать визуальную индикацию о том, как долго длится процесс и как близко к завершению.

sudo dd if=/home/vlad/Desktop/images/ubuntu.img | pv | sudo dd of=/dev/sdb

Результат:

45,12MB 0:00:15 [ 450kB/s] [ <=> ]

Вариант 2

Использование команды kill

Также, вы можете следить за ходом dd, используя команду kill

Чтобы увидеть прогресс работы dd, откройте другой терминал и введите:

kill -USR1 $(pgrep ^dd)

Если бы вы хотели получать регулярные обновления о прогрессе dd, то введите:

watch -n5 'sudo kill -USR1 $(pgrep ^dd)'

watch будет исследовать процесс dd каждые -n секунд (-n5 = 5 секунд) и выводить отчет без остановки.

Обратите внимание на правильные одиночные кавычки в команде выше!!!

==============================

Варианты dd, ориентированные на восстановление

Программы с открытым исходным кодом для восстановления включают dd_rescue и dd_rhelp, которые работают вместе, savehd7 и GNU ddrescue. (# apt-get install gddrescue)

Antonio Diaz Diaz (разработчик GNU ddrescue) сравнивает варианты dd для задач восстановления:

Стандартная утилита dd осуществляет линейное чтение диска, и это может занять много времени или даже сжечь накопитель без восстановления чего-либо, если ошибки расположены в начале жесткого диска.

dd_rescue делает то же самое, что и dd, только более эффективно.

dd_rhelp — это сложный shell-скрипт, который запускает dd_rescue много раз, стараясь стратегически копировать накопитель, но это очень неэффективно.

dd_rhelp сначала извлекает все доступные к чтению данные и сохраняет их в файл, вставляя нули вместо байтов, которые не смог прочесть. Потом утилита пытается повторно прочитать некорректные данные и обновить этот файл.

GNU dd_rescue может быть использована для копирования данных прямо на новый диск по необходимости, как и dd.

=======================