Александр Сахнов — Почему вам не стоит использовать байесовское A/B-тестирование

Подробнее о конференции IML:
— — Скачать презентацию с сайта I'ML —
Наблюдается хайп, связанный с байесовскими A/B-тестами. Спикер рассмотрел популярные мифы о байесовском A/B-тестировании. Александр сравнил подход с классическим. Подкрепил аргументы не словами, а реальными экспериментами. Рассмотрел все шаги A/B-тестирования, а именно: до начала A/B-теста, во время проведения и после его окончания. Спикер затронул такие темы, как расчет дизайна эксперимента, ранняя остановка, работа с метриками отношений и повышение чувствительности тестов. Привел примеры, когда можно применить байесовское A/B-тестирование.