Сравнение двух подходов к свипстейки: результаты A/B-теста

[示例数据] На тестах Facebook и оффер Offer #3965 показал себя лучше ожидаемого, поэтому по свипстейки в KR мы оставили его как основной.

Риски и ограничения

На тестах Facebook и оффер Offer #3965 показал себя лучше ожидаемого, поэтому по свипстейки в KR мы оставили его как основной.

• Проверяем гипотезу на малом бюджете.
• Считаем CR и удержание по когортам.
• Считаем CR и удержание по когортам.

Метрики и выводы

Если говорить про свипстейки в KR, то Facebook и оффер Offer #3965 здесь работает предсказуемо и без сюрпризов. Facebook и оффер Offer #3965 — ключевой фактор: без него по свипстейки в KR результат просаживается почти вдвое.

Что учесть при масштабировании

Если говорить про свипстейки в KR, то Facebook и оффер Offer #3965 здесь работает предсказуемо и без сюрпризов. Facebook и оффер Offer #3965 — ключевой фактор: без него по свипстейки в KR результат просаживается почти вдвое.

• Фиксируем результат и повторяем на соседнем гео.
• Сравниваем два подхода на одном GEO.
• Проверяем гипотезу на малом бюджете.

Практика и тесты

Отдельно стоит отметить Facebook и оффер Offer #3965: по свипстейки в KR это дало заметный прирост конверсии. По свипстейки в KR видно стабильный рост: Facebook и оффер Offer #3965 держит показатели уже несколько месяцев подряд.