Cloudflare вчера лежал три часа и положил пол-интернета. Опять

[bunmaker]

Вчера с 16:40 по мск начались массовые 500-ки у всех, кто за Cloudflare. Дискорд, половина SaaS, куча магазинов рунета, наш прод в том числе. Статус-пейдж у них первое время тоже лежал, потому что сам за их же проксей, это уже классика жанра.

По горячим следам пишут, что виноват очередной кривой конфиг в bot management, как в ноябре 2025. Восстановили к 19:50.

Мы выкрутились тем, что DNS у нас в отдельном месте и TTL 300: переключили A-записи напрямую на ориджин, потеряли на вечер защиту от ботов, зато магазин работал. Кто как пережил?

[RedisNinja]

а я вчера в 16:35 выкатил релиз. представь моё лицо, когда через пять минут посыпались алерты. час откатывал и искал у себя, грешил на свежую миграцию, чуть базу из бэкапа не накатил. потом коллега скинул скрин даундетектора. вот это был день, бл

[svelteandy]

сижу на голом nginx без всяких CDN и в такие дни чувствую себя умнее всех. да, ддос страшно, но за пять лет ддосили один раз, а клаудфлер лежит уже третий раз за год. статистика сама за себя

[susanne]

Правильный ответ тут мульти-CDN с фейловером, но когда видишь ценник Fastly вторым контуром, быстро понимаешь, что три часа простоя в год дешевле. Считали для нашего объёма: резервный контур окупается при даунтайме от 20 часов в год. У нас столько не набегает даже с учётом вчерашнего.

[k8s_master]

а почему нельзя просто хоститься в России? у нас же свои CDN есть, VK Cloud какой-нибудь

[lorenzinoarq]

вопрос выше: можно, многие так и делают. но клаудфлер это не только CDN, это анти-бот, WAF и бесплатный тариф, на котором сидит половина мелкого бизнеса. бесплатность и есть причина, почему один их сбой кладёт столько всего разом

[davkar]

ставлю на то, что в постмортеме опять будет конфиг, который раздулся за лимит и разъехался по всем датацентрам без канарейки. после ноябрьского инцидента они обещали staged rollout для конфигов. интересно почитать, что пошло не так в этот раз

[ninja_marina]

держать прод за облаком, которое падает чаще твоего пет-проекта, это отдельный вид смелости

[Bowden]

@lorenzinoarq, у нас вчера паника была ровно обратная: все решили, что это РКН опять что-то заблокировал, и я полдня объяснял руководству, что в этот раз не он. вот до чего дожили: сбой у американской компании, а первая мысль про РКН