О том, как мы убили классический A/B тест в ценообразовании.

О том, как мы убили классический A/B тест в ценообразовании.
Раньше тратили бюджет на пилоты, просто разбрасывая скидки рандомно. Это дорого: либо сливали маржу, либо теряли юзеров. Перешли на Contextual Bandits. Суть: классическое exploration для 100% базы нужно только на старте. Дальше мы запускаем exploitation практически сразу, оставляя рандомизацию лишь для малой доли пользователей, чтобы поддерживать баланс исследования и использования. Модель обучается «на лету», без переобучения по батчам. Мониторим дрейф через ковариационную матрицу (Thompson Sampling), а не ждем отчет раз в месяц.
Нюанс: готовых библиотек под бизнес-задачи нет. Пришлось писать свой пайплайн с нуля (линейные модели + AirFlow). Для Middle/Senior DS — задача на пару спринтов, но без готовых решений.
Главный лимит бандитов — они оптимизируют шаг вперед, а не LTV. Клиент может купить сегодня и уйти завтра. Поэтому наш следующий шаг — Reinforcement Learning для построения долгосрочной стратегии.
Хотите разобрать архитектуру, пайплайн и подводные камни внедрения RL?
Приходите на MF Spark Camp. Никаких лекций, только хардкорный нетворкинг и разбор полетов у костра.
📅 29 июля, Москва, м. Тургеневская.
🔗 **Залетай - **регистрация
Раньше тратили бюджет на пилоты, просто разбрасывая скидки рандомно. Это дорого: либо сливали маржу, либо теряли юзеров. Перешли на Contextual Bandits. Суть: классическое exploration для 100% базы нужно только на старте. Дальше мы запускаем exploitation практически сразу, оставляя рандомизацию лишь для малой доли пользователей, чтобы поддерживать баланс исследования и использования. Модель обучается «на лету», без переобучения по батчам. Мониторим дрейф через ковариационную матрицу (Thompson Sampling), а не ждем отчет раз в месяц.
Нюанс: готовых библиотек под бизнес-задачи нет. Пришлось писать свой пайплайн с нуля (линейные модели + AirFlow). Для Middle/Senior DS — задача на пару спринтов, но без готовых решений.
Главный лимит бандитов — они оптимизируют шаг вперед, а не LTV. Клиент может купить сегодня и уйти завтра. Поэтому наш следующий шаг — Reinforcement Learning для построения долгосрочной стратегии.
Хотите разобрать архитектуру, пайплайн и подводные камни внедрения RL?
Приходите на MF Spark Camp. Никаких лекций, только хардкорный нетворкинг и разбор полетов у костра.
📅 29 июля, Москва, м. Тургеневская.
🔗 **Залетай - **регистрация
GPT/ChatGPT/AI Central Александра Горного
843 публикаций на visbl.me
Авторский взгляд на новости технологий Реклама: https://docs.google.com/presentation/d/1glQMXYyKAYpzNP8VXzM4gl2YkEgLjkeD_Fxvzbu5QUE/edit РКН: https://clck.ru/3FPkup Личный аккаунт: @gornal О рекламе: @Vzuhcha ВП нет
Связанные темы
Читать далее
Kimi K3 выложили на Hugging Face
GPT/ChatGPT/AI Central Александра Горного·
Microsoft заменяет модели OpenAI собственными
GPT/ChatGPT/AI Central Александра Горного·
Как изменился закон о ИИ в 2026 году?
GPT/ChatGPT/AI Central Александра Горного·
Какой закон об ИИ подписал Путин в 2026 году?
GPT/ChatGPT/AI Central Александра Горного·
Расшаренные чаты с Claude появились в поисковиках
GPT/ChatGPT/AI Central Александра Горного·
OpenAI неделю не замечала, что ее AI-агент взломал Hugging Face
GPT/ChatGPT/AI Central Александра Горного·