OpenAI опубликовала отчет об инциденте с подробным описанием причины сбоя ChatGPT на прошлой неделе и мер, принятых для предотвращения повторения. Отключение началось в 10:40 26 декабря 2024 года и в основном было устранено к 15:11, за исключением ChatGPT, который был на 100% восстановлен к 18:20.
Были затронуты следующие службы:
- ЧатGPT
- Создание видео Сора
- API: агенты, язык реального времени, пакетная обработка и DALL-E.
Причина сбоя OpenAI
Причиной сбоя стал сбой в центре обработки данных облачного провайдера, который повлиял на базы данных OpenAI. Базы данных зеркально отражаются в разных регионах, но переключение на резервную базу данных требовало ручного вмешательства со стороны поставщика облачных услуг для перенаправления операций в резервный центр обработки данных в другом регионе. В качестве причины устранения сбоя было названо ручное вмешательство, но причина, по которой оно заняло так много времени, заключалась в масштабах проекта.
Аварийное переключение — это автоматизированный процесс переключения на резервную систему в случае сбоя системы. OpenAI объявила, что работает над изменениями инфраструктуры, чтобы улучшить реагирование на будущие сбои в работе облачных баз данных.
OpenAI объяснил:
«В ближайшие недели мы запустим крупную инфраструктурную инициативу, чтобы гарантировать, что наши системы смогут выдержать длительные сбои в работе в любом регионе любого из наших облачных провайдеров, добавив уровень косвенности, который мы контролируем, между нашими приложениями и нашими облачными базами данных. Это позволит значительно ускорить аварийное переключение».
Значительный сбой ChatGPT
По данным OpenAI, сбой ChatGPT произошел из-за ошибки базы данных регионального облачного провайдера, но последствия были глобальными, о чем свидетельствуют отчеты пользователей в социальных сетях со всей Европы и Северной Америки.
Google Trends, отслеживающий объем поиска, указывает, что это, возможно, было крупнейшее событие такого рода: информацию о нем искало больше людей, чем во время любого предыдущего сбоя.
Рекомендованное изображение с сайта Shutterstock/lillgrapher
