21 августа 2026 г.
Actions и Copilot легли на 7 часов 47 минут: у GitHub кончилась ёмкость
Сломал не релиз, а собственный рост: коммитов на GitHub за четыре месяца стало больше чем вдвое.
17 августа GitHub лежал 7 часов 47 минут: не открывались pull requests, не запускались Actions, молчал Copilot.
Причину компания назвала через три дня, и это не ошибка в коде и не правка конфигурации. Трафик достиг нового пика, а критический компонент инфраструктуры в дата-центре Central US не отмасштабировался вместе с ним.
Рост в числах. В апреле на GitHub делали 1,4 млрд коммитов в месяц, к августу стало 2,9 млрд. Завершённых прогонов Actions в начале года было 15–30 млн в месяц, сейчас 115,4 млн. Смерженных pull requests около 130 млн в месяц, новых репозиториев около 24 млн.
Под этот рост GitHub переехал на Azure: в мае там шло 12% нагрузки платформы, сейчас около 58% и половина всех Git-операций. За тот же заход компания добавила больше 3 млн CPU-ядер, 120 петабайт быстрого хранилища и сетевую ёмкость.
Восстановление тормозили сами клиенты. Ошибки сервисов запускали цикл повторов на стороне клиентов, и он подливал трафика прямо во время починки. Теперь GitHub вводит единые лимиты повторов, бюджеты на повторные запросы и разные таймауты между сервисами.
В мае компания отчиталась о девяти инцидентах длительностью от 35 минут до почти четырёх часов и назвала приоритеты: сначала доступность, потом ёмкость, потом фичи. Через три месяца платформа снова упёрлась в ёмкость.
Чинить обещают постепенно, начиная с крупнейших монорепозиториев.
Первоисточник