mlops

Довести модель до продакшена — полдела; удержать её там живой — вот где начинается настоящая работа. Обсуждаем трекинг экспериментов в MLflow и Weights and Biases, мониторинг дрейфа данных через Evidently без дорогих SaaS, тюнинг KV-cache и батчинга в vLLM, чтобы инференс не падал с OOM на пиках трафика. Опыт людей, у которых ML-системы реально крутятся под нагрузкой, а не живут в Jupyter-ноутбуках.

5 тем, 33 ответов, 346 просмотров · все теги

Похожие теги: monitoring 2data-drift 2mlflow 1wandb 1эксперименты 1vLLM 1inference 1production 1open-source 1pytorch 1Gemma4 1fine-tuning 1продакшн 1