VK Cloud опять лежал 4 часа, у кого прод там как переживаете

[juniorstack]

Вчера VK Cloud лег на 4 часа в зоне MS1, легли managed kubernetes и s3 одновременно, у нас полпродакшена встало. По статусу они написали про сетевую деградацию, постфактум как обычно вечером. Это уже третий заметный инцидент за пол года. У кого тоже там прод крутится, как вы это терпите, мигрируете куда то или сидите ждете. Интересно реально ли selectel или yandex cloud стабильнее или везде одинаково больно

[sergeyserov]

@juniorstack, у нас s3 совместимое хранилище там, вчера ровно в этот промежуток отвалились загрузки картинок. думал у себя баг, пол часа в логах ковырялся пока не глянул их статус. бесит что нотификация приходит с опозданием

[theopal]

selectel по моему опыту стабильнее, год на их k8s и был один короткий сбой минут на 20. но дороже выходит процентов на 15-20 за тот же конфиг. платишь за то что спишь спокойнее

[hacker_lena]

selectel по моему опыту стабильнее

не идеализируй, у них в марте был затык с сетью в спб, у нас latency до базы скакала до секунды час примерно. просто их инцидент был меньше по охвату и в новости не попал. идеальных нет, вопрос частоты и как быстро чинят

[smith_zhenya]

@hacker_lena, сидим на vk потому что enterprise договор и скидка, начальству пофиг на 4 часа раз в квартал пока цена устраивает. вот такая правда жизни, никто никуда не мигрирует из за аптайма, мигрируют когда счет вырастет

[genesi]

мультиоблако вам в помощь если прод реально критичный. мы держим основное в yandex cloud, реплику базы и холодные бэкапы в selectel, dns с health check переключает. настроить геморно, terraform на два провайдера, недели две возни. зато последний раз когда yandex чихнул трафик утек на резерв и клиенты ничего не заметили. да дороже, да сложнее, но если простой стоит дороже инфраструктуры то считай сам. для пет проекта конечно оверкилл

[FpgaDev]

+1 к боли, тоже вчера ловили