Этап 3: варианты для A/B-теста

Stack Ball: Спаси котика

Один плейбл и три варианта из одной базы. В каждом меняется одна вещь, чтобы в тесте было понятно, что сработало. Рядом с игрой видно, какие события плейбл отправляет в аналитику прямо сейчас.

Вариант
Сначала показать, как играть
Язык

Что проверяет каждый вариант

ВариантЧто меняетсяГипотезаСмотрим
A. КлассикаТолько механика, два уровняКонтроль: так выглядит обычная реклама Stack BallIPM как точка отсчёта
B. Спаси котика+ котик в клетке и шипы сверхуЭмоция и давление поднимут IPMIPM, доля дошедших до конца, удержание D1
C. Выбери шарB + выбор шара на стартеВыбор в первые секунды увеличит долю начавших игратьПервое касание, время до него, CTR
+ ПоказПервые 3 секунды игра играет сама, потом «Теперь ты!»Меньше людей растеряется на стартеВремя до первого касания, доля начавших

Что делать по итогам теста

Каждый вариант сравниваем с A. Главная метрика — IPM (установки на 1000 показов), за ней удержание D1 и окупаемость (ROAS). Решаем только когда разница значимая: рекламные сети показывают это в отчёте. Воронка ниже нужна, чтобы понять причину.

РезультатЧто это значитЧто делаем дальше
B выше A по IPM, D1 не хужеКотик и шипы приводят больше людей, и это те же игрокиB в основную ротацию. Следующий тест — сам крючок: другой питомец, скорость шипов, длина интро
B выше A по IPM, но D1 нижеКотик привлекает тех, кто ждёт игру про котика, а в Stack Ball его нетСмотрим окупаемость, а не только IPM. Пробуем финал, где после спасения показана настоящая игра, или крючок ближе к игре
B на уровне AЭмоция не сработала, причину ищем в воронкеМало начавших — длинный старт: тест с показом или короче интро. Много проигрышей на шипах — давление слишком сильное, шипы медленнее
C: начавших больше, IPM тот жеВыбор шара вовлекает, но не продаётОставляем выбор, только если вырос и CTR на end card. Иначе убираем: это лишний шаг до игры
Показ: касаются раньше, начавших большеМеньше людей теряется на стартеВключаем показ по умолчанию в победившем варианте
Показ: начавших меньшеЛюди смотрят и уходят, не дождавшись своей очередиУбираем показ или сокращаем до 1–2 секунд

Где искать причину в воронке

Где теряем людейЧто это значитЧто пробуем
Загрузился → Начал игратьНа старте непонятно, что делать, или интро слишком длинноеЗаметнее подсказка, показ, интро короче
Начал играть → Пробил 10 колецПроигрывают на первых чёрных секторахЧёрные сектора позже и реже в начале башни
Проиграл: на скольких процентахПроигрыш у самого котика — «почти получилось» работает. Проигрыш в начале — просто сложноЕсли проигрывают рано, облегчаем начало. Если у котика и потом кликают «Играть», баланс не трогаем
Увидел end card → Нажал «Играть»Финальный экран не убеждаетОтдельный тест end card: текст, кнопка, обещание награды

Воронка на этой странице

Считает события из плейбла, пока открыта страница. В настоящей кампании те же события шли бы в рекламную сеть или AppsFlyer.