Инкрементное резервное копирование с rsync и cron
Резервное копирование одного сервера Linux на другой с помощью rsync и cron: отдельный ограниченный SSH-ключ, снапшоты на жёстких ссылках, ротация и тестовое восстановление.
На этой странице
Это руководство объясняет, как каждую ночь копировать сервер на второй сервер с помощью rsync и cron. Каждая резервная копия выглядит как полная копия с датой, но неизменённые файлы не хранятся повторно: они связаны с предыдущей резервной копией жёсткими ссылками.
Резервируемый сервер использует отдельный SSH-ключ, который позволяет только запись в один каталог. Даже если этот сервер будет скомпрометирован, этот ключ не позволит ни открыть оболочку на сервере резервных копий, ни прочитать или удалить прежние резервные копии через rsync.
Предварительные требования
- Два сервера под управлением Debian 12 или 13 либо Ubuntu 22.04 или 24.04 с доступом
sudo - Исходный сервер, который нужно копировать, в этом руководстве называется
web01 - Сервер резервных копий с достаточным объёмом диска, желательно в другом месте
- Файловая система сервера резервных копий, поддерживающая расширенные атрибуты, например ext4 или XFS
Замените IP_СЕРВЕРА_БЭКАПОВ и IP_ИСХОДНОГО_СЕРВЕРА адресами ваших серверов.
Порт, который нужно открыть
Подключение принимает только сервер резервных копий: порт 22/tcp или ваш порт SSH должен быть доступен с адреса исходного сервера. С UFW на сервере резервных копий:
sudo ufw allow from IP_ИСХОДНОГО_СЕРВЕРА to any port 22 proto tcpСохраните правило, позволяющее вам самим администрировать этот сервер. Наше руководство Защита сервера подробно описывает настройку SSH.
Подготовка сервера резервных копий
-
Установите пакеты.
python3нужен скриптуrrsync, поставляемому с rsync:Терминалsudo apt update sudo apt install -y rsync python3 cron -
Создайте отдельную учётную запись без пригодного для входа пароля и каталог назначения:
Терминалsudo useradd --create-home --home-dir /srv/rsyncbackup --shell /bin/sh rsyncbackup sudo install -d -o rsyncbackup -g rsyncbackup -m 700 /srv/rsyncbackup/.ssh /srv/rsyncbackup/web01
Подготовка исходного сервера
-
Установите пакеты:
Терминалsudo apt update sudo apt install -y rsync cron openssh-client -
Создайте ключ, предназначенный только для резервного копирования. У него нет парольной фразы, так как cron должен использовать его самостоятельно: поэтому на следующем шаге он будет жёстко ограничен.
Терминалsudo install -d -m 700 /root/.ssh sudo ssh-keygen -t ed25519 -N '' -C 'backup-rsync@web01' -f /root/.ssh/backup_rsync sudo cat /root/.ssh/backup_rsync.pub
Ограничение ключа на сервере резервных копий
-
Откройте файл разрешённых ключей:
Терминалsudo nano /srv/rsyncbackup/.ssh/authorized_keys -
Добавьте одну строку с вашим открытым ключом в конце:
Текстfrom="IP_ИСХОДНОГО_СЕРВЕРА",restrict,command="/usr/bin/rrsync -wo -no-del /srv/rsyncbackup/web01" ssh-ed25519 AAAA...ваш_открытый_ключ backup-rsync@web01Элемент Назначение from=Принимает этот ключ только с исходного сервера restrictОтключает терминал и перенаправления SSH command=Принудительно запускает rrsyncвместо любой другой команды-woРазрешает только запись, без чтения -no-delЗапрещает параметры удаления rsync -
Примените права:
Терминалsudo chown rsyncbackup:rsyncbackup /srv/rsyncbackup/.ssh/authorized_keys sudo chmod 600 /srv/rsyncbackup/.ssh/authorized_keys -
Выведите отпечаток сервера, чтобы сравнить его на следующем шаге:
Терминалsudo ssh-keygen -lf /etc/ssh/ssh_host_ed25519_key.pub
Проверка подключения
На исходном сервере сохраните ключ сервера резервных копий, затем сравните его отпечаток с предыдущим:
ssh-keyscan -t ed25519 IP_СЕРВЕРА_БЭКАПОВ | sudo tee -a /root/.ssh/known_hosts
sudo ssh-keygen -lf /root/.ssh/known_hostsЕсли отпечатки различаются, удалите добавленную строку и выясните причину, прежде чем продолжать. Затем проверьте ключ:
sudo ssh -i /root/.ssh/backup_rsync -o IdentitiesOnly=yes rsyncbackup@IP_СЕРВЕРА_БЭКАПОВОжидаемый ответ — ошибка rrsync, содержащая Not invoked via sshd. Она доказывает, что ключ принят и не даёт доступа к оболочке.
Создание скрипта резервного копирования
На исходном сервере:
-
Создайте список исключений:
Терминалsudo nano /etc/backup-rsync.excludeТекст/root/.ssh/backup_rsync* /root/.ssh/restore_rsync* /root/.cache/ /home/*/.cache/ /var/www/*/cache/ *.tmp -
Создайте скрипт, указав адрес сервера резервных копий и копируемые каталоги:
Терминалsudo nano /usr/local/sbin/backup-rsync.shТерминал#!/bin/bash set -uo pipefail BACKUP_HOST="IP_СЕРВЕРА_БЭКАПОВ" BACKUP_USER="rsyncbackup" SSH_PORT=22 SSH_KEY="/root/.ssh/backup_rsync" SOURCES=(/etc /home /root /var/www /var/backups) EXCLUDES="/etc/backup-rsync.exclude" STATE_DIR="/var/lib/backup-rsync" SNAPSHOT="$(date +%Y-%m-%d_%H%M%S)" exec 9>/run/lock/backup-rsync.lock if ! flock -n 9; then echo "$(date -Is) backup already running" exit 0 fi mkdir -p "$STATE_DIR" EXISTING=() for path in "${SOURCES[@]}"; do [ -e "$path" ] && EXISTING+=("$path") done SSH_CMD="ssh -i $SSH_KEY -p $SSH_PORT -o BatchMode=yes -o IdentitiesOnly=yes -o StrictHostKeyChecking=yes -o ConnectTimeout=20" OPTIONS=(-aHAX --numeric-ids --relative --timeout=600 --stats --exclude-from="$EXCLUDES" -M--fake-super -e "$SSH_CMD") if [ -s "$STATE_DIR/last" ]; then OPTIONS+=("--link-dest=/$(cat "$STATE_DIR/last")") fi echo "$(date -Is) starting $SNAPSHOT" rsync "${OPTIONS[@]}" "${EXISTING[@]}" "$BACKUP_USER@$BACKUP_HOST:$SNAPSHOT/" status=$? # Код 24 сигнализирует о файлах, исчезнувших во время копирования. if [ "$status" -ne 0 ] && [ "$status" -ne 24 ]; then echo "$(date -Is) failed with rsync code $status" exit "$status" fi MARKER="$(mktemp)" rsync -e "$SSH_CMD" "$MARKER" "$BACKUP_USER@$BACKUP_HOST:$SNAPSHOT/.backup-complete" status=$? rm -f "$MARKER" if [ "$status" -ne 0 ]; then echo "$(date -Is) could not write completion marker, rsync code $status" exit "$status" fi echo "$SNAPSHOT" > "$STATE_DIR/last" echo "$(date -Is) finished $SNAPSHOT" -
Сделайте его исполняемым и запустите первую резервную копию. Она копирует всё и может занять много времени:
Терминалsudo chmod 700 /usr/local/sbin/backup-rsync.sh sudo /usr/local/sbin/backup-rsync.sh -
Подождите минуту, затем запустите его снова, чтобы создать второй снапшот:
Терминалsudo /usr/local/sbin/backup-rsync.sh
| Параметр | Назначение |
|---|---|
-a |
Сохраняет структуру каталогов, даты, права и символические ссылки |
-H, -A, -X |
Сохраняют жёсткие ссылки, ACL и расширенные атрибуты |
--numeric-ids |
Сохраняет числовые идентификаторы пользователей и групп |
--relative |
Воспроизводит полные пути в снапшоте |
--link-dest |
Связывает неизменённые файлы с предыдущим снапшотом |
-M--fake-super |
Записывает владельцев и права в расширенные атрибуты, не требуя root на стороне назначения |
Проверка снапшотов
На сервере резервных копий:
sudo ls -la /srv/rsyncbackup/web01
sudo sh -c 'du -sh /srv/rsyncbackup/web01/*'
sudo sh -c 'stat -c "%h %n" /srv/rsyncbackup/web01/*/etc/hostname'du учитывает каждый общий файл только один раз: поэтому второй снапшот должен выглядеть значительно меньше первого. stat должен показать число ссылок не менее 2 для неизменённого файла. Каждый завершённый снапшот содержит файл .backup-complete.
Планирование через cron
На исходном сервере:
-
Создайте запланированную задачу:
Терминалsudo nano /etc/cron.d/backup-rsyncТекстSHELL=/bin/bash PATH=/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin 15 3 * * * root /usr/local/sbin/backup-rsync.sh >> /var/log/backup-rsync.log 2>&1Этот файл должен принадлежать
rootи заканчиваться переводом строки. -
Ограничьте размер журнала:
Терминалsudo nano /etc/logrotate.d/backup-rsyncТекст/var/log/backup-rsync.log { weekly rotate 8 compress missingok notifempty } -
Убедитесь, что cron активен, затем проверьте журнал на следующий день:
Терминалsudo systemctl is-active cron sudo tail -n 30 /var/log/backup-rsync.log sudo cat /var/lib/backup-rsync/last
Удаление старых снапшотов
Ротация выполняется на сервере резервных копий. Поэтому у исходного сервера нет возможности стереть историю.
-
Создайте скрипт:
Терминалsudo nano /usr/local/bin/backup-rsync-pruneТерминал#!/bin/bash set -euo pipefail ROOT="/srv/rsyncbackup/$1" KEEP="${2:-14}" cd "$ROOT" mapfile -t COMPLETE < <(find . -mindepth 2 -maxdepth 2 -type f -name .backup-complete -printf '%h\n' | sed 's|^\./||' | sort) COUNT="${#COMPLETE[@]}" [ "$COUNT" -gt "$KEEP" ] || exit 0 OLDEST_KEPT="${COMPLETE[COUNT-KEEP]}" for dir in 20*/; do snapshot="${dir%/}" if [[ "$snapshot" < "$OLDEST_KEPT" ]]; then rm -rf -- "${ROOT:?}/$snapshot" fi doneОн хранит 14 последних завершённых снапшотов и удаляет всё более старое, включая прерванные снапшоты. Удаление снапшота не удаляет файлы, которые всё ещё используются последующими.
-
Запланируйте его:
Терминалsudo chmod 755 /usr/local/bin/backup-rsync-prune echo '45 5 * * * rsyncbackup /usr/local/bin/backup-rsync-prune web01 14' | sudo tee /etc/cron.d/backup-rsync-prune -
Чтобы узнать об остановке резервного копирования, отслеживайте эту проверку, которая завершается ошибкой, если ни один снапшот не был завершён за последние 26 часов:
Терминалsudo find /srv/rsyncbackup/web01 -mindepth 2 -maxdepth 2 -name .backup-complete -mmin -1560 | grep -q . && echo "OK" || echo "NO RECENT BACKUP"
Проверка восстановления
Выполните этот тест прямо сейчас, а затем регулярно. Поскольку ключ резервного копирования не может читать данные, создайте второй ключ только для чтения, предназначенный для восстановления.
-
На исходном сервере создайте этот ключ:
Терминалsudo ssh-keygen -t ed25519 -N '' -C 'restore-rsync@web01' -f /root/.ssh/restore_rsync sudo cat /root/.ssh/restore_rsync.pub -
На сервере резервных копий добавьте эту строку в
/srv/rsyncbackup/.ssh/authorized_keys:Текстfrom="IP_ИСХОДНОГО_СЕРВЕРА",restrict,command="/usr/bin/rrsync -ro /srv/rsyncbackup/web01" ssh-ed25519 AAAA...ключ_восстановления restore-rsync@web01 -
На исходном сервере выведите список снапшотов:
ТерминалBACKUP_HOST="IP_СЕРВЕРА_БЭКАПОВ" SSH_RESTORE="ssh -i /root/.ssh/restore_rsync -p 22 -o BatchMode=yes -o IdentitiesOnly=yes" sudo rsync --list-only -e "$SSH_RESTORE" "rsyncbackup@$BACKUP_HOST:/" -
Восстановите
/etcво временный каталог из последнего завершённого снапшота:ТерминалSNAPSHOT="$(sudo cat /var/lib/backup-rsync/last)" sudo mkdir -p /var/tmp/rsync-restore sudo rsync -aHAX --numeric-ids -M--fake-super -e "$SSH_RESTORE" "rsyncbackup@$BACKUP_HOST:$SNAPSHOT/etc/" /var/tmp/rsync-restore/etc/ -
Сравните содержимое, владельца и права:
Терминалsudo diff -r /etc /var/tmp/rsync-restore/etc | head -n 20 sudo stat -c '%U:%G %a %n' /etc/shadow /var/tmp/rsync-restore/etc/shadowОтличаться должны только файлы, изменённые после резервного копирования, а две строки
statдолжны показывать одного и того же владельца и одинаковые права. -
Удалите тестовую копию, так как она содержит конфиденциальные данные:
Терминалsudo rm -rf /var/tmp/rsync-restore -
Если восстанавливать ничего не нужно, удалите строку с ключом
restore-rsyncна сервере резервных копий. При необходимости вы добавите её снова.
Восстановление после сбоя
Выберите в списке снапшот, содержащий .backup-complete, и запишите его имя в SNAPSHOT. Сначала смоделируйте операцию с --dry-run и проверьте список, так как она может перезаписать файлы:
sudo rsync -aHAX --numeric-ids -M--fake-super --dry-run --itemize-changes -e "$SSH_RESTORE" "rsyncbackup@$BACKUP_HOST:$SNAPSHOT/var/www/" /var/www/Если результат вас устраивает, повторите команду без --dry-run. Если исходный сервер утрачен, подготовьте новый сервер, создайте ключ восстановления, добавьте его на сервер резервных копий с новым адресом в from=, затем восстанавливайте ваши каталоги по одному.
Обновление
rsync обновляется вместе с системой на обоих серверах:
sudo apt update
sudo apt upgradeПосле обновления проверьте журнал следующей резервной копии. Если вы заменяете сервер резервных копий, его ключ хоста меняется: обновите /root/.ssh/known_hosts на исходном сервере после проверки нового отпечатка.
Если что-то пошло не так
Permission denied (publickey)
Проверьте на сервере резервных копий открытый ключ, адрес в from= и права. Журнал SSH часто указывает причину:
sudo ls -ld /srv/rsyncbackup /srv/rsyncbackup/.ssh
sudo ls -l /srv/rsyncbackup/.ssh/authorized_keys
sudo journalctl -u ssh -n 30 --no-pagerДомашний каталог не должен быть доступен для записи группе или остальным пользователям.
Host key verification failed.
Ключа сервера резервных копий нет в /root/.ssh/known_hosts, либо он изменился. Повторите шаг проверки, не отключая контроль.
python3: No such file or directory
rrsync не может запуститься. Установите python3 на сервере резервных копий.
do not use .. in --link-dest
rrsync отклоняет пути, содержащие ... Путь --link-dest должен начинаться с /, как в скрипте: тогда он считается относительно разрешённого каталога.
reading from write-only server is not allowed
Вы пытаетесь читать с ключом резервного копирования. Используйте ключ восстановления restore_rsync.
Another instance of rrsync is already accessing this directory.
Резервное копирование уже выполняется, либо прежнее подключение не завершено. Проверьте командой pgrep -a rsync на обоих серверах.
Код 23: some files/attrs were not transferred
Некоторые файлы не удалось скопировать. Журнал указывает их непосредственно перед этим сообщением. Скрипт считает этот снапшот неудачным: устраните причину и запустите его снова.
Operation not supported (95) для атрибутов
Файловая система сервера резервных копий не поддерживает расширенные атрибуты, используемые --fake-super. Размещайте резервные копии на томе ext4 или XFS.
Код 255 или 12
SSH-подключение не удалось или было разорвано. Повторите проверку подключения и проверьте сеть, брандмауэр и свободное место на диске по нашему руководству Проверка свободного места на диске.
Все файлы копируются заново при каждом запуске
Проверьте /var/lib/backup-rsync/last: он должен содержать имя существующего снапшота. Убедитесь также, что этот снапшот содержит нужные файлы и что файловая система назначения поддерживает жёсткие ссылки.