Показ двух версий страницы или сценария сопоставимым группам реальных пользователей одновременно с выбором той, что измеримо работает лучше.
Это заменяет внутренние мнения доказательствами ровно в тех решениях, о которых команды спорят дольше всего: формулировки, раскладка, цены, шаги онбординга.
Мы рассчитываем тест до запуска: понятная метрика, нужная выборка и дата остановки. Тест, остановленный раньше срока из-за хороших цифр, — то же угадывание, только с лишними шагами.