Я рекомендую — Организация инкрементальных бекапов за 5 минут

Все мы делаем бекапы, ну может собираемся их делать. Системные администраторы знают множество различных рецептов для выполнения этого запретного и таинственного действия. Вот один из них.

Для организации простого инкрементального бекапа я хочу предложить использовать утилиту rdiff-backup. Эта штука написана на python и использует в качестве основы rsync.

Создание бекапов

Найти в репозиториях своего дистрибутива, думаю, не составит труда.
В создании бекапов также проста как rsync:

1	rdiff-backup /source/path /destination/path

В результате в /destination/path будет создано зеркало каталога /source/path.
Если мы внесем какие-либо изменения в /source/path, а потом выполним команду бекапа повторно, утилита определит, что именно изменилась и добавить копию только изменившихся файлов, а может даже только изменившуюся часть этих файлов, хотя фиг знает. В любом случае появится новый слепок каталога.
Посмотреть наличие слепков можно командой:

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21

rdiff-backup -l /destination/path Found 18 increments: increments.2012-07-14T21:51:05+06:00.dir Sat Jul 14 21:51:05 2012 increments.2012-07-15T21:51:03+06:00.dir Sun Jul 15 21:51:03 2012 increments.2012-07-15T22:02:30+06:00.dir Sun Jul 15 22:02:30 2012 increments.2012-07-16T21:51:08+06:00.dir Mon Jul 16 21:51:08 2012 increments.2012-07-19T21:51:08+06:00.dir Thu Jul 19 21:51:08 2012 increments.2012-07-25T21:51:02+06:00.dir Wed Jul 25 21:51:02 2012 increments.2012-07-27T21:51:04+06:00.dir Fri Jul 27 21:51:04 2012 increments.2012-07-28T21:51:08+06:00.dir Sat Jul 28 21:51:08 2012 increments.2012-07-30T21:51:04+06:00.dir Mon Jul 30 21:51:04 2012 increments.2012-07-31T21:51:09+06:00.dir Tue Jul 31 21:51:09 2012 increments.2012-08-01T21:51:03+06:00.dir Wed Aug 1 21:51:03 2012 increments.2012-08-07T21:51:03+06:00.dir Tue Aug 7 21:51:03 2012 increments.2012-08-11T21:51:06+06:00.dir Sat Aug 11 21:51:06 2012 increments.2012-08-12T21:51:07+06:00.dir Sun Aug 12 21:51:07 2012 increments.2012-08-13T21:51:03+06:00.dir Mon Aug 13 21:51:03 2012 increments.2012-08-16T21:51:08+06:00.dir Thu Aug 16 21:51:08 2012 increments.2012-08-19T21:51:03+06:00.dir Sun Aug 19 21:51:03 2012 increments.2012-08-23T00:38:15+06:00.dir Thu Aug 23 00:38:15 2012 Current mirror: Sat Aug 25 01:25:01 2012

Утилита делает инкремент только в том случае, если были внесены какие-то изменения в файлы и каталоги со времени последнего выполнения бекапа. Благодаря этому мы получаем ряд полезных плюшек:

1. 
   
2. Возможность экономить дисковое пространство. Если я не ошибаюсь, инкременты делаются до тех пор, пока их суммарный объем не превысит половины объема от последнего полного бекапа. Когда это случается, делается снова полный бекап
   
3. Возможность вернуться не просто к последнему бекапу, а бекапу за определенное число
   
4. Управлять всем этим хозяйством чертовски просто

Что бы получить краткую сводку после выполненного бекапа, достаточно в команду внести опцию --print-statistic

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21

rdiff-backup --print-statistic /source/path /destination/path --------------[ Session statistics ]-------------- StartTime 1345877958.00 (Sat Aug 25 12:59:18 2012) EndTime 1345878004.57 (Sat Aug 25 13:00:04 2012) ElapsedTime 46.57 (46.57 seconds) SourceFiles 33020 SourceFileSize 467469521 (446 MB) MirrorFiles 1 MirrorFileSize 0 (0 bytes) NewFiles 33019 NewFileSize 467469521 (446 MB) DeletedFiles 0 DeletedFileSize 0 (0 bytes) ChangedFiles 1 ChangedSourceSize 0 (0 bytes) ChangedMirrorSize 0 (0 bytes) IncrementFiles 0 IncrementFileSize 0 (0 bytes) TotalDestinationSizeChange 467469521 (446 MB) Errors 0 --------------------------------------------------

Восстановление данных

Что бы восстановить данные, необходимо выполнить команду вида:

1	rdiff-backup -r now /destination/path /local/path

В результате мы восстановим данные из последнего выполненного бекапа в каталог /local/path.
Поскольку в /destination/path хранится полное дерево того, что мы бекапим, то можно указать для восстановления только определенный файл или каталог, например так:

1	rdiff-backup -r now /destination/path/some/directory/or/file /local/path

Чувствую пятой точкой, как минимум глоббинг здесь так же должен работать, но не проверял.
Что бы восстановить файлы 5 дневной давности, можно воспользоваться такой командой:

1	rdiff-backup -r 5D /destination/path/some/directory/or/file /local/path

Можно восстановить и по определенной дате:

1	rdiff-backup -r 2012-08-05 /destination/path/some/directory/or/file /local/path

, но в этом нужно сначала просмотреть список доступных инкрементов, после чего указать TIMESTAMP того, что Вам нужен:

1	rdiff-backup -r 2012-08-13T21:51:03+06:00 /destination/path/some/directory/or/file /local/path

Удаляем старое

Естественно, что хранить кучу устарвешего файла 5 лет нет смысла. Rdiff-backup умеет и прибирать за собой. Давайте удалим бекапы старше, чем 16 недель:

1	rdiff-backup --remove-older-than 16W /destination/path

Удаление старых бекапов происходит таким образом, что если в тот день имеется только инкремент полного бекапа, то останется все предыдущие до момента создания этого инкремента бекапы вплоть до предыдущего полного бекапа. Таким образом гарантируется, что удаление старых бекапов не приведет к неработоспособности оставшихся инкрементов.

Немного сладкого напоследок

Поскольку rdiff используется для работы rsync, то естественно он умеет делать бекапы на удаленный хост. Команда для создания бекапов в этом случае выглядит примерно так:

1	rdiff-backup /source/path user@backup-host::/destination/path

Аналогично можно проводить восстановление данных и просмотр уже сделанных бекапов. Для автоматизирования создания бекапов и удаления старых необходимо будет сделать очевидные вещи:

• 
  
• настроить ssh-авторизацию по ключу
• 
  
• навоять простенький скрипт
• 
  
• добавить задание в cron

Вот небольшой мини скрипт бекапа, написанный мною на скорую руку:

1 2 3 4 5 6 7 8

#!/bin/bash # backup script with using rdiff-backup if ping -c 1 -s 1 -W 1 backup-server then rdiff-backup /source/path user@backup-server::/destination/path rdiff-backup --remove-older-than 16W user@$backup-server::/destination/path fi

При необходимости пишем логи, настраиваем отправку отчетов по электронной почте.