Gcore - СЕРВИС | МЕСТОПОЛОЖЕНИЕ Подробности инцидента – Детали инцидента

Небольшой сбой

СЕРВИС | МЕСТОПОЛОЖЕНИЕ Подробности инцидента

Решено
Полная недоступность
Началось 2 месяца назаддлился около 13 часов

Затронутые

Экосистема Gcore

Полная недоступность от 7:24 PM до 8:15 PM, Работает от 8:05 PM до 8:41 AM

API

Полная недоступность от 7:24 PM до 8:05 PM, Работает от 8:05 PM до 8:41 AM

Биллинговая система

Полная недоступность от 7:24 PM до 8:15 PM, Работает от 8:15 PM до 8:41 AM

Портал клиента

Полная недоступность от 7:24 PM до 8:15 PM, Работает от 8:15 PM до 8:41 AM

Веб-сайт

Полная недоступность от 7:24 PM до 8:15 PM, Работает от 8:15 PM до 8:41 AM

CDN

Полная недоступность от 7:24 PM до 8:15 PM, Работает от 8:05 PM до 8:15 PM, Полная недоступность от 8:15 PM до 8:23 PM, Работает от 8:15 PM до 8:23 PM, Частичная недоступность от 8:23 PM до 8:27 PM, Работает от 8:23 PM до 8:41 AM

Обновления
  • После смерти
    UTC
    После смерти

    Публичный анализ первопричин инцидента:

    Дата: 13 мая 2026 г. | Продолжительность: 19:08 – 20:14 UTC (1 час 6 минут)


    Краткое содержание

    13 мая 2026 года с 19:08 до 20:14 UTC часть CDN-сервиса Gcore столкнулась с глобальным сбоем. CDN-серверы по всему миру перестали обрабатывать запросы и возвращали ошибки HTTP 502 для части клиентских ресурсов. Сбой затронул gcore.com , клиентский портал, общедоступные API-интерфейсы и доставку CDN на части инфраструктуры.


    Влияние

    • Сайты gcore.com и portal.gcore.com были недоступны.

    • Сервис api.gcore.com вернул ошибку 502, что повлияло на работу API в сервисах CDN, Cloud, DNS, Streaming, Storage, WAAP и IAM.

    • Аутентификация на портале на основе SSO/SAML была нарушена во время и вскоре после этого периода.

    • У клиентов, использующих CDN-ресурсы, обслуживаемые через затронутую инфраструктуру, наблюдались ошибки 502 при обработке пользовательского трафика.


    Первопричина

    Это был инцидент, вызванный цепной реакцией — три независимых пробела в конвейере настройки CDN в совокупности превратили одно изменение конфигурации в глобальный сбой на границе сети. Любой из этих трех дефектов, если бы он отсутствовал, предотвратил бы сбой.

    1. Проблема с проверкой входных данных API: внутреннее поле маршрутизации источника, изначально предназначенное для настройки только администратором, лишилось ограничений доступа в результате переработки API в 2023 году и впоследствии было опубликовано в общедоступной документации API (март 2026 г.) без указания допустимых значений. Это позволило отправлять и принимать через API нестандартные значения.

    2. Ошибка в логике генерации конфигурации: Когда конвейер конфигурации CDN обрабатывал ресурс с нестандартным значением, ошибка в генерации конфигурации на уровне правил незаметно отключила все исходные серверы, в результате чего была получена конфигурация с пустым списком вышестоящих серверов.

    3. Сбой инициализации на граничном узле: Когда граничный узел CDN получил конфигурацию с пустым списком исходных ресурсов, скрипт на граничном узле завершился с ошибкой на этапе инициализации. Поскольку файл конфигурации является глобальным (общим для всех ресурсов на узле), эта единственная некорректная запись привела к сбою инициализации всего узла — возвращая HTTP 502 для всего трафика, а не только для затронутого ресурса. Этот сбой распространился на все граничные узлы в затронутой инфраструктуре.


    Хронология (UTC)

    Время

    Событие

    19:08

    Конфигурация CDN, содержащая некорректно сформированный ресурс, глобально передается на периферийные узлы.

    19:08–19:14

    Краевые узлы начинают возвращать HTTP 502 по всему миру.

    19:15

    Объявлен инцидент P1

    19:24

    На публичной странице состояния инцидента размещено сообщение

    19:42

    Начинается процесс смягчения последствий: критически важные сервисы перенаправляются через альтернативную периферийную инфраструктуру.

    19:53

    Клиентский портал перенесен на альтернативную инфраструктуру.

    20:01

    Дополнительные ресурсы были перенесены.

    20:14

    Исправление применено, проблемный ресурс отключен через API; граничные узлы восстанавливаются.

    22:05

    Исправление проверки на уровне API объединено.

    23:06

    Исправление API внедрено в продакшн.


    Разрешение

    Работа сервиса была восстановлена в 20:14 UTC путем отключения ресурса, содержащего некорректную конфигурацию. Инженеры занимались устранением последствий с 19:42 UTC, перенаправляя критически важные службы плоскости управления (API, портал) через альтернативную периферийную инфраструктуру.


    Корректирующие действия

    #

    Действие

    Статус

    1

    Проверка входных данных на уровне API: отклонение недопустимых значений для поля маршрутизации источника.

    Развернуто

    2

    Исправлена логика генерации конфигурации для корректной обработки унаследованных групп источников, что устраняет ошибку скрытого удаления группы источников.

    В ходе выполнения

    3

    Усовершенствовать инициализацию на уровне сервера для корректного завершения работы при сбоях (уровень правила 502) вместо полного сбоя узла при пустой конфигурации вышестоящего сервера.

    В ходе выполнения

    4

    Поля API, связанные с аудитом, из версии 2023 года, предназначенной для устранения аналогичных регрессий в системе контроля доступа.

    В ходе выполнения

    5

    Пересмотрите и обновите документацию API, чтобы четко указать допустимые значения для всех полей конфигурации источника.

    В ходе выполнения


    Мы приносим искренние извинения за причиненные неудобства. Мы полны решимости завершить оставшиеся исправления и внедрить дополнительные меры защиты, чтобы предотвратить подобные сбои в конвейере конфигурации в будущем, которые могут привести к глобальным последствиям.

  • Решено
    UTC
    Решено

    Мы рады сообщить вам, что крупный сбой в работе нашего веб-сайта, глобальной CDN-сети, доступа к API для всех сервисов и клиентского портала устранен. Однако, если у вас возникнут какие-либо проблемы, пожалуйста, не стесняйтесь обращаться в нашу службу поддержки. Наша команда с удовольствием поможет вам и обеспечит оперативное решение любых дальнейших вопросов.

    Мы также предоставим подробный анализ первопричин (RCA), как только он станет доступен.

    Мы ценим ваше терпение и понимание на протяжении всего инцидента и благодарим вас за сотрудничество.

    Для получения дополнительной помощи, пожалуйста, свяжитесь с нашей службой поддержки по адресу support@gcore.com.

  • Мониторинг
    UTC
    Мониторинг

    Мы рады сообщить вам, что наша инженерная команда внедрила исправление для устранения масштабного сбоя в работе нашего веб-сайта, глобальной CDN-сети, доступа к API для всех сервисов и клиентского портала, в результате которого они стали полностью недоступны. Однако мы продолжаем внимательно следить за ситуацией, чтобы обеспечить стабильную работу.

    Мы сообщим вам о результатах, как только подтвердим полное устранение проблемы.

  • Обновление
    UTC
    Обновление

    Мы восстанавливаемся, и все сервисы работают в обычном режиме. Сервис CDN в основном восстановлен; однако для некоторых пользователей он может быть частично недоступен. Мы продолжаем следить за ситуацией и работаем над устранением неполадок.

  • Обновление
    UTC
    Обновление

    Веб-сайт и клиентский портал снова работают. Мы продолжаем устранять неполадки в других сервисах.

  • Определено
    UTC
    Определено

    Доступ к API восстановлен, и мы продолжаем устранять неполадки в других сервисах. Мы будем держать вас в курсе.

  • Изучается
    UTC
    Изучается

    В настоящее время мы столкнулись с серьёзным сбоем в работе [ВСТАВЬТЕ КОНКРЕТНУЮ УСЛУГУ ИЛИ ПОДРОБНОСТИ ОПЕРАЦИИ], что привело к полной недоступности сервиса. Мы приносим искренние извинения за любые доставленные неудобства и высоко ценим ваше терпение и понимание в это непростое время.

    Наша команда инженеров активно работает над выявлением первопричины и скорейшим решением проблемы. Мы будем регулярно информировать вас о ходе решения проблемы по мере поступления информации.

    Благодарим Вас за понимание и сотрудничество.