Перейти к содержимому
Инфраструктура

Сервер создан — не значит, что сервис работает: переезд в день аварии

6 мин чтения
Переезд сервиса между провайдерами: три панели, три отказа и четыре проверки снаружи

Второго ноября у Beget легло всё сразу: панель управления, сайты на хостинге, виртуальные серверы, почта и DNS. В тот же день мы перевозили клиентский проект — интеграционный сервис, который связывает магазин с CRM. Ничего лишнего в нём не было: только код, ни базы, ни медиа. По расчёту — три часа. Ушло больше суток и три облака.

Сначала хорошая новость

Код лежал в удалённом git-репозитории — хранилище версий, из которого проект разворачивается командой, а не копируется по FTP с чьего-то ноутбука. Перенос прошёл штатно: склонировали, собрали, запустили. Там же были конфиги: nginx (веб-сервер), php-fpm (обработчик PHP), cron (планировщик задач) и правила firewall.

По-английски это Infrastructure as Code, по-русски — «инфраструктура как код»: сервер собирается из файлов, а не из кликов в панели. В день, когда панель хостинга недоступна, это единственное, на что можно опереться.

И отдельная удача этого проекта: в нём не было базы данных. Ни дампов, ни сверки, ни «а не отстала ли копия» — переносить было нечего, кроме кода. Именно поэтому единственная часть переезда, которая прошла без приключений, — та, что заранее лежала вне панели хостинга.

Три панели, три отказа

Reg.ru: сервер есть, тарифов нет

Сервер добавили, но промахнулись с операционной системой — а ОС определяет, встанут ли нужные версии PHP и расширения, от которых зависит сервис. Решили пересоздать, и на этом шаге панель управления перестала отвечать: сутки.

В интерфейсе для нужной системы висело «Нет доступных тарифов» — то есть заказать замену было нельзя даже за деньги.

Панель рег.облако: для выбранной операционной системы «Нет доступных тарифов»

Selectel: заказ ушёл в ожидание

Первый заказ вернул «Ошибка выполнения запроса». Со второго раза заказ прошёл — но сервер ушёл в ожидание: платформа предлагала сначала зоны, где свободных машин нет.

Логика интерфейса остаётся загадкой: зачем показывать то, что нельзя заказать, если рядом есть то, что можно. Ждать мы не стали — пошли к следующему провайдеру.

Selectel: «Ошибка выполнения запроса» при создании сервера

Timeweb: сервер жив, а снаружи его нет

Сервер создался, из панели управлялся — а снаружи не отвечал. Причина оказалась не в конфиге: выданный IP-адрес ранее попал в реестр Роскомнадзора, то есть в список адресов, трафик к которым провайдеры блокируют. Машина жива, сервиса нет. Пока не привязали другой адрес, не работало ничего.

Общее у трёх историй одно: ни одна поломка не касалась самого сервиса. Код был цел, конфиги те же. Отказала инфраструктура — та часть, которую обычно считают решённой сразу после оплаты.

Почему «сервер создан» не значит «сервис работает»

Панель — это пульт, а не датчик. Она сообщает, что машина выделена и включена, и ничего не говорит о том, доходит ли до неё запрос из CRM. Хуже: панель часто ходит к серверу по внутренней сети провайдера — видит машину, которую снаружи не видит никто, и честно рисует зелёный статус.

Отсюда расхождение, которое стоило нам часов: «в панели работает» и «клиент получает ответ» — два разных факта, и второй важнее.

Четыре проверки снаружи

Проверять надо не с самого сервера и не из панели: и то и другое смотрит на себя. Сначала прогоняем проверки на пустом сервере, потом разворачиваем код и повторяем.

  1. HTTP с внешней точки. Запрос к сервису из обычного интернета. Вопрос: отдаёт ли он ответ тому, кто пришёл снаружи. Если ответ виден только в панели — это не работающий сервис, а картинка в панели.
  2. DNS. Смотрим, на какой IP указывает домен и сколько живёт кэш у резолверов. Проверять с нескольких резолверов: у одного запись обновилась, у другого ещё старая, и часть запросов из CRM продолжает ехать на старую машину.
  3. Почта: MX и отправка. Нужно, если сервис или CRM шлют уведомления. Проверить приём мало — надо отправить письмо наружу и увидеть, что оно дошло, а не осело в очереди. Письмо, которое не ушло, обычно обнаруживается от клиента.
  4. Сертификат. Срок, цепочка, имя домена. Просроченный на день сертификат или выписанный на старое имя ломает интеграцию тише, чем упавший сервер: сервис отвечает, а CRM получает ошибку.

В случае с Timeweb все четыре проверки оказались красными одновременно: сервер создан, адрес есть, снаружи тишина, панель показывает здоровую машину.

Что теперь предлагаем клиентам

  1. Код — только в удалённом репозитории и в актуальном виде. Не «на сервере лежит рабочая версия» и не архив за прошлый год.
  2. Если в проекте есть база — в двух-трёх независимых S3, ежедневный дамп и раз в квартал проверка восстановления: развернуть копию на стенде и прогнать реальный сценарий. Бэкап, который ни разу не разворачивали, — это файл неизвестного содержания. В этом проекте базы не было, и это честно сэкономило нам полдня.
  3. Медиа — туда же, в два-три хранилища. Фотографии каталога чаще всего забывают, а при переезде их не должно быть нужды перекачивать.
  4. IaC в git — nginx, php-fpm, cron, firewall, сертификаты. Описание, по которому новый сервер собирается заново, а не восстанавливается по памяти администратора, который может быть в отпуске.

Что изменили в самом процессе

  1. Переключение DNS переехало в конец: сначала машина, потом временный адрес, потом четыре проверки, и только после них — записи домена. Пока DNS смотрит на старый сервер, проблемы новой машины видит только подрядчик; после переключения их видит каждый клиент.
  2. Наличие тарифа в интерфейсе и наличие свободных машин в зоне — разные вещи. Второе проверяем до того, как выключен старый сервер.
  3. Если платформа ставит заказ в ожидание — не ждём на месте, идём к следующему провайдеру и возвращаемся, только если там не вышло.
  4. Каждый отказ панели записываем текстом: что нажали и что получили. «Ошибка выполнения запроса» — это факт для поддержки, а не повод нажать ещё раз.
  5. Не пересоздаём сервер, пока не понятно, что именно не так: иначе меняется всё сразу и причина теряется.

Итог

Переезд занял больше суток вместо трёх часов. Код был готов с самого начала — и от этого задержка обиднее: время ушло на ожидание панели, «нет доступных тарифов», свободных зон и нового адреса.

Сервер создаётся за минуты. Сервис начинает работать только после проверок снаружи, и в день аварии выручает лишь то, что заранее вынесено из панели хостинга в git.

А как у вас прошёл переезд? Расскажите в комментариях или в чате: что сломалось, сколько заняло и чем спаслись. Соберём общий список грабель — он полезнее любого чек-листа.

#переезд #хостинг #vps #dns #сертификаты
По теме
Аудит аварии

Проверить, где живут DNS, сайт, почта и файлы и что упадёт одновременно.

Открыть

Читайте также