Как удержать точность ML-модели в продакшене: ADWIN и онлайн-обучение спасают от концептуального дрейфа

Модель может отлично работать на тестовых данных, но в продакшене точность быстро падает — из-за изменения поведения пользователей, спроса или рыночных условий. Это явление называется концептуальным дрейфом (concept drift). Статья объясняет, как его вовремя распознать и почему обычное переобучение по расписанию часто запаздывает.

Решение — связка онлайн-обучения с алгоритмом ADWIN (Adaptive Windowing). ADWIN отслеживает изменения в распределении данных в реальном времени и сигнализирует, когда пора подстраивать модель. Так модель адаптируется к новым данным без полного сброса накопленного знания, что экономит время и вычислительные ресурсы.