Большой сервис снова лёг из-за бага в апдейте. Сколько можно катить в прод без нормального роллбэка?

[vitaly_io]

Опять крупная площадка легла на несколько часов, причина по постмортему — баг в свежем апдейте. И это уже второй раз за год с тем же корнем. Складывается ощущение что про юзеров узнают раньше чем про инцидент мониторинг.

[egor1580]

Классический набор: тестов мало, роллбэк медленный, катят слишком часто, и алерт это твиттер а не прометей. Любого пункта хватит, а тут похоже все четыре сразу.

[igor_ssh60]

Медленный роллбэк — это вообще приговор. Если ты не можешь откатиться за минуту одной кнопкой, у тебя нет роллбэка, у тебя есть надежда. А надежда не стратегия деплоя.

[konstantin_x]

Вот тут как раз нормальный аргумент за прогрессивную выкатку. Канарейка на 1% трафика поймала бы этот баг на сотне юзеров вместо миллионов. Стоит копейки, ставится за день, а спасает репутацию.