Настройка автоматизации бэкапов с pg_cron и cron в Linux

Автоматизация бэкапов — это как автоматическая чистка зубов, только для вашей базы данных. Регулярный процесс резервного копирования спасает мир (в данном случае — ваши данные) от катастроф. Никто не хочет в 3 часа ночи получить сообщение, что сервер упал, осознавая, что последний бэкап был сделан две недели назад. Автоматизация решает эту проблему: больше никаких компромиссов с риском данных из-за человеческого фактора.

Инструментов для автоматизации много, но сегодня мы обсудим два самых популярных:

1. cron — это универсальный и давно знакомый планировщик задач в Linux.
2. pg_cron — расширение PostgreSQL, которое позволяет запускать задачи непосредственно через сам сервер базы данных.

Расширение pg_cron под капотом дергает сервис cron. Этот сервис доступен только на Linux!

Поехали!

Установка pg_cron

pg_cron — это расширение PostgreSQL, которое позволяет расписание автоматических задач прямо в базе данных. Это красиво, удобно и прокачивает ваш PostgreSQL до уровня маленького операционного центра.

Шаги установки:

1. Убедитесь, что используете PostgreSQL 10+, потому что pg_cron поддерживается только на современных версиях.

2. Установите расширение с помощью пакетного менеджера вашей системы. Для Ubuntu, например:

   sudo apt install postgresql-<version>-cron
   

   Замените <version> на версию PostgreSQL, установленную в вашей системе.

3. Включите расширение в конфигурации PostgreSQL. Откройте файл postgresql.conf и добавьте:

   shared_preload_libraries = 'pg_cron'
   

   Зачем это нужно? pg_cron требует, чтобы библиотека загружалась при старте PostgreSQL — это обязательное условие.

4. Перезапустите сервер PostgreSQL:

   sudo systemctl restart postgresql
   

5. Активируйте расширение в вашей базе данных:

   CREATE EXTENSION pg_cron;
   

На этом этапе pg_cron готов к работе!

Создание задания для автоматического создания бэкапов

Главная фишка pg_cron — это возможность запускать команды в заданное время. Давайте создадим задание для автоматического выполнения команды pg_dump.

Пример:

SELECT cron.schedule(
    'nightly_backup', -- имя задачи
    '0 2 * * *', -- расписание (каждую ночь в 2 часа)
    $$pg_dump -U username -F c -f /backups/university_backup.dump university$$ -- команда
);

Расшифруем магию:

• 'nightly_backup' — это пользовательское имя задачи, чтобы вы могли легко её идентифицировать.
• '0 2 * * *' — расписание в формате cron: каждый день в 2:00.
• Команда внутри $$ $$: мы исполняем pg_dump для создания резервной копии базы university.

После создания задачи она начнет выполняться по расписанию!

Просмотр и удаление задач pg_cron

Чтобы увидеть все существующие задачи:

SELECT * FROM cron.job;

Если какая-то задача больше не актуальна, удалить её можно так:

SELECT cron.unschedule(job_id);

Замените job_id на идентификатор задачи из вышеуказанного запроса.

Использование cron для автоматизации

Если вы предпочитаете классический Linux-подход к автоматизации или pg_cron по каким-то причинам недоступен, вам поможет всемогущий cron.

Настройка задания с помощью cron

Для начала убедитесь, что cron установлен и работает:

sudo systemctl enable cron
sudo systemctl start cron

Теперь добавим задание для создания резервной копии. Откройте редактор для настройки задач cron:

crontab -e

Добавьте строку:

0 2 * * * pg_dump -U username -F c -f /backups/university_backup.dump university

Эта магическая строчка сделает следующее:

• В 2 часа ночи каждый день (0 2 * * *) создаст резервную копию базы university.
• Все бэкапы будут сохраняться в файл /backups/university_backup.dump.

После сохранения файла crontab запланированное задание начнёт выполняться.

Логи выполнения cron

Иногда бывает полезно знать, что пошло не так. Убедитесь, что вывод команд записывается в лог-файл для анализа. Для этого добавьте в команду перенаправление вывода:

0 2 * * * pg_dump -U username -F c -f /backups/university_backup.dump university >> /var/log/backup.log 2>&1

Теперь всё, что произойдёт во время выполнения задачи, будет сохранено в файл /var/log/backup.log.

Сравнение pg_cron и cron

Итак, у нас есть два мощных инструмента. Как выбрать подходящий?

• pg_cron отличный выбор, если вам нужно настроить расписание и управлять задачами непосредственно через PostgreSQL. Это удобно, не требует покидать базу данных и позволяет масштабировать задачи.

• cron более универсален. Вы можете использовать его не только для PostgreSQL, но и для автоматизации других задач.

Проверка выполнения заданий

Чтобы проверить, что резервное копирование работает, вы можете запустить команду cron вручную:

pg_dump -U username -F c -f /backups/university_backup.dump university

Также полезно проверять наличие файлов бэкапов в указанной директории, их размер и время последнего создания. Например:

ls -lh /backups/

Регулярно проверяйте логи и убедитесь, что задания выполняются корректно.

Простая защита от типичных ошибок

Ошибка №1: "Забыл настроить права!"

Если пользователь, под которым запускается cron, не имеет прав на выполнение pg_dump, задачи не будут работать. Убедитесь, что у пользователя есть доступ к базе данных.

Ошибка №2: "Файл не туда пошёл!"

Всегда указывайте полный путь к файлам и командам. cron не знает о вашем окружении — полный путь обязателен: pg_dump -> /usr/bin/pg_dump.

Ошибка №3: "Где мои логи?"

Не забывайте перенаправлять вывод команды в лог-файл. Без этого никакой информации о проблемах вы не получите.

На этом этапе вы готовы к автоматическому созданию бэкапов вашей базы данных. Теперь, даже если сервер неожиданно уйдёт в отпуск, ваши данные будут в безопасности!