Поиск будущих VIP, которых пропускает основная модель

Основная ML-модель находила 41 % будущих VIP-игроков — остальные оставались незамеченными. Я сделал модель, которая смотрит на платежи игрока в первые две и три недели после первого депозита и ищет будущих VIP среди тех, кого основная модель пропустила. Проверял её на периоде позже обучающего, чтобы она не подглядывала в будущее; первый рабочий запуск прошёл все 295 проверок. Теперь VIP-менеджеры каждый день получают на 27 % больше лидов, и ни один не дублирует основную модель. Среди 1 % игроков с самым высоким прогнозом VIP становятся в 16 раз чаще, чем в среднем.

Вход

Платежи игрока на 14-й и 21-й день после первого депозита — только у тех, кого не отметила основная модель.

Модель

CatBoost, ROC-AUC 0,87–0,89. Среди 1 % игроков с самым высоким прогнозом VIP становятся в 16 раз чаще, чем в среднем.

Действие

Каждый день VIP-менеджеры получают на 27 % больше лидов, и ни один не дублирует основную модель.

Защита

Модель проверяли на периоде позже обучающего, чтобы она не подглядывала в будущее. Первый рабочий запуск прошёл все 295 проверок отбора.

Эффект

Повторный прогноз на 21-й день добавил ещё 40 % лидов при той же точности.