продукты связь общество семья прогноз самит google

Признаки в обучении и проде расходятся: воспроизводим ошибку на тестовом наборе

Модель оценивает риск отмены заказа продавцом. На проверочном наборе она выглядит убедительно. После запуска часть заказов получает неожиданно низкий риск, хотя код модели и порог не менялись.Разработчик открывает карточку одного заказа и видит: в обучающей строке у продавца две отмены за последние семь дней, а в запросе к модели во время оформления заказа не было ни одной.Команда сначала проверяет версию модели.

Но расхождение может возникнуть раньше, при сборке признака. Обучающая таблица была выгружена спустя неделю и содержала окончательный счётчик отмен.

DMCA