Агент гипотез для A/B-тестов

Хорошая гипотеза — половина успеха теста. Но идеи «что бы проверить» приходят по вдохновению и заканчиваются. Агент даёт поток структурированных гипотез на основе ваших данных.

🎯 После урока сможешь: собрать агента, который выдаёт поток гипотез для A/B-тестов по твоим данным.

Структура хорошей гипотезы

Структура хорошей гипотезы: ЕСЛИ изменим X, ТО метрика Y вырастет/упадёт на Z%, ПОТОМУ ЧТО обоснование, ИЗМЕРИМ как (A/B на 2 недели, 1000 показов). Пример: ЕСЛИ заголовок начнётся с цифры, ТО CTR в Telegram вырастет на 10–20%, ПОТОМУ ЧТО цифры цепляют внимание, ИЗМЕРИМ A/B на 10 постах за 2 недели.

Промпт агента-гипотетика

Ты — продуктовый маркетолог, спец по A/B-тестам.
Контекст: [продукт и текущая ситуация]
Текущие метрики: {{current_metrics}}
Что уже пробовали: {{past_experiments}}
Цель: {{business_goal}}

Сформулируй 5-10 гипотез. Каждая:
ГИПОТЕЗА N — ЕСЛИ [изменение] ТО [метрика +сколько]
ПОТОМУ ЧТО [обоснование]
ПРИОРИТЕТ / СЛОЖНОСТЬ / СРОК ТЕСТА

Гипотезы: конкретные, проверяемые, разные, реалистичные.

Как встроить в работу

Как встроить гипотезы в работу раз в месяц: 1) запускаем агента-гипотетика — 10 гипотез с приоритетами; 2) берём 3 топ-приоритета (высокий приоритет, низкая сложность); 3) запускаем 3 A/B-теста; 4) через месяц измеряем и получаем новые гипотезы. Итог — систематический рост метрик, а не «попробуем что-нибудь».

Просите агента давать гипотезы разного уровня — не все про заголовки. Заголовки, время публикации, формат, оффер, длина, призыв — так вы тестируете всю воронку, а не одну её точку.

Контрольный вопрос. Из каких частей состоит хорошая гипотеза?

АПросто «улучшим текст и картинку»
БНазвание, дата и автор идеи
ВЕСЛИ → ТО → ПОТОМУ ЧТО → ИЗМЕРИМ

Подсказка: Изменение, эффект, обоснование, замер.

Онлайн-проверка ответа появится позже

Контрольный вопрос. Какие 3 гипотезы брать в работу из десяти?

АСамые сложные и амбициозные
БСлучайные три из общего списка
ВВысокий приоритет + низкая сложность

Подсказка: Максимум эффекта при минимуме усилий.

Онлайн-проверка ответа появится позже

Контрольный вопрос. Что даёт агент-гипотетик по сравнению с «попробуем что-нибудь»?

АПолную замену A/B-тестам и замерам
БСистематический поток проверяемых гипотез
ВГарантию роста метрик без тестов

Подсказка: Система вместо озарений.

Онлайн-проверка ответа появится позже

Контрольный вопрос. Нужно сформулировать гипотезу по структуре ЕСЛИ→ТО→ПОТОМУ ЧТО→ИЗМЕРИМ для идеи «добавить emoji в начало поста». Какой вариант формулировки собран правильно?

АЕСЛИ пост начнётся с emoji, ТО CTR вырастет на 5-10%, ПОТОМУ ЧТО emoji выделяется в ленте, ИЗМЕРИМ A/B на 10 постах за 2 недели.
БДобавим emoji — станет красивее и понятнее.
ВТочно сработает, все так делают в соцсетях.

Подсказка: Хорошая гипотеза содержит все четыре части структуры, а не общие слова.

Онлайн-проверка ответа появится позже

Контрольный вопрос. Есть 3 гипотезы с параметрами: A — приоритет высокий, сложность высокая, срок теста 2 месяца; B — приоритет средний, сложность низкая, срок 1 неделя; C — приоритет высокий, сложность низкая, срок 2 недели. Какую гипотезу возьмёте в работу первой по правилу из урока?

Правило из урока: в работу берут гипотезы, у которых одновременно высокий приоритет И низкая сложность.

АA — раз приоритет высокий, сложность неважна
БC — высокий приоритет и низкая сложность вместе
ВB — раз сложность ниже всех

Подсказка: Правило — сочетание двух условий сразу, а не одно из них.

Онлайн-проверка ответа появится позже

Что дальше

Данные, отчёты и гипотезы есть. Осталось научиться доносить это до руководства так, чтобы услышали — в финальном уроке модуля.

← Назад  ·  ↑ В начало урока  ·  ⌂ В начало курса  ·  Вперёд →

Школа Виктора Комлева