GitHub лежал почти весь день, Actions потеряли очередь джобов. Как пережили?

[suches]

С 11 утра по мск пуши через раз, веб 500-ит, Actions висят в queued. К обеду джобы из очереди просто испарились, ранеры молчат. У нас на сегодня был запланирован релиз, деплой едет через Actions, все встало колом. Откатились на ручной деплой по инструкции, которую обновляли год назад, нашли в ней два неработающих шага, весело провели время. Статус-пейдж, кстати, час показывал зеленый all systems operational, когда твиттер уже горел. У кого что отвалилось и какие выводы сделали?

[bunmaker]

вывод старый: статусным страницам верить нельзя, их обновляют вручную после согласования с пиаром. мониторьте свои пайплайны сами, healthcheck на критичный путь пишется за вечер

[Manuelriere]

моя gitea на хецнере за 4.5 евро в месяц сегодня показала аптайм 100%. но вы продолжайте платить майкрософту и ждать, когда у них в очередной раз конфиг на балансеры криво раскатится

[rtrowsdell]

self-hosted это прекрасно ровно до момента, когда твой хецнер за 4.5 евро ляжет в субботу ночью и чинить будешь ты сам, а не дежурная смена гитхаба. для соло-проектов ок, тащить такое в контору с 30 разрабами нет уж, спасибо

[omnicrom]

странно, у меня весь день пуши проходили нормально. может у вас провайдер чудит?

[envoy69]

git умеет несколько push url на один remote: git remote set-url -add -push origin и адрес зеркала. Держим зеркало на самохостнутом gitlab чисто как горячий бэкап, сегодня впервые за два года пригодилось. Две команды в конфиге, а нервов экономит вагон.

[docker5]

@omnicrom, релиз, который физически невозможен без Actions, это вы сами себе проблему придумали. собранный артефакт должен лежать в registry, докатить его руками дело пяти минут, а не двух часов по сломанной инструкции

[danga]

постмортем уже выкатили, опять изменение конфигурации зацепило маршрутизацию и каскадом легли API с Actions. третий раз за полтора года один и тот же класс отказа, хах. но карточку с lessons learned они нарисовали красивую