Что важно бизнесу
Выясняем, какие сервисы критичны, сколько можно простоять и какую потерю данных допустить.
Полезные алерты, резервные копии и проверка возврата в работу.
Мониторинг, резервное копирование и восстановление определяют, узнаете ли вы о сбое раньше клиентов и вернётся ли сервис после потери данных. Мы настраиваем полезные уведомления вместо шума, политику резервных копий и, главное, проверяем восстановление на практике. Копия, которую никогда не восстанавливали, считается несуществующей.
Когда о сбоях сообщают клиенты или резервные копии давно не проверяли восстановлением.
Видимое состояние системы и проверенный сценарий восстановления.
Собираем метрики серверов, баз и приложений в Prometheus, журналы в единое место, строим панели в Grafana. Уведомления настраиваем на то, что требует действия, и убираем те, которые привыкли игнорировать.
Для типовых сбоев пишем короткие сценарии: что проверить, где посмотреть, что сделать. Дежурный или ваш инженер действует по инструкции, а не вспоминает, как было в прошлый раз.
Определяем, что копируем, как часто, куда и сколько храним, с учётом требований к данным. Копии размещаем отдельно от основной площадки и проверяем их целостность автоматически.
Восстанавливаем сервис из копии на тестовом окружении, замеряем время и объём потерянных данных. Сравниваем с требованиями бизнеса и фиксируем RPO и RTO, которые реально достижимы.
Выясняем, какие сервисы критичны, сколько можно простоять и какую потерю данных допустить.
Проверяем, что отслеживается и копируется сейчас, пробуем восстановить тестовую копию.
Доводим мониторинг, уведомления, резервное копирование и хранение до согласованных требований.
Проводим восстановление по сценарию, замеряем, исправляем, повторяем.
Передаём панели, инструкции и график регулярных проверок.
Три ситуации, которые встречаем чаще всего. Если узнали свою — напишите, разберём вашу.
Ситуация: мониторинг либо отсутствует, либо шлёт столько уведомлений, что их отключили. Нужно наблюдение, которому доверяют.
Ситуация: резервное копирование настроили давно, скрипт что-то пишет, но никто не пробовал поднять сервис из копии. Нужно убедиться, что это работает.
Ситуация: клиенты или регулятор требуют подтверждения, что данные защищены и восстанавливаемы. Нужна документированная политика и доказательство проверки.
Настройку мониторинга и резервного копирования оцениваем как проект после бесплатного экспресс-аудита за 48 часов, по числу серверов, сервисов и баз, объёму данных и требованиям к RPO и RTO. В рамках сопровождения мониторинг и резервное копирование уже входят в тариф «Старт» от 30 000 ₽ в месяц, а регулярные проверки восстановления можно добавить в график. Работы вне согласованного объёма считаем по 3 000 ₽ в час.
Проверяем восстановление в согласованном окружении и фиксируем результат. Сам факт создания копии ещё не доказывает возможность восстановить сервис.
RPO описывает допустимую потерю данных во времени, RTO — целевое время восстановления. Значения определяем из требований бизнеса и проверяем с учётом архитектуры.
Регулярно и по графику, а не раз при настройке. Периодичность согласуем по критичности сервиса; результаты каждой проверки фиксируем, чтобы было видно, что она действительно проводилась.
Отдельно от основной площадки: в другом облаке, другом регионе или объектном хранилище с ограниченным доступом. Для данных с требованиями по локации выбираем хранилище в России.
Да, если он покрывает нужное. Чаще дорабатываем существующий Prometheus и Grafana, чем ставим новый; главное, чтобы уведомления были полезными.
Уточним объём, сроки и ограничения. Предложим план работ и объясним, из чего складывается стоимость.
Получить оценкуРасскажите о сервисах, текущей площадке, нагрузке и проблеме. Укажите допустимый простой и требования к поддержке. Пароли и ключи доступа в обращении не нужны.
Зачем нужен тест восстановления, что такое RPO и RTO, план проверки резервных копий и типовые ошибки, из-за которых копия есть, а восстановить нечего.
Читать Инфраструктура · 8 минПлан миграции сервисов в облако: инвентаризация, выбор площадки, тестовый перенос, окно переключения, DNS и TTL, план отката и проверки после переезда.
ЧитатьРасскажите, что хотите сделать.
Ответим в течение рабочего дня.