Когда появляются идеи для тестов?

Когда появляются идеи для тестов: процесс генерации гипотез

Это отличный вопрос, потому что он показывает разницу между аналитиком, который просто "анализирует то, что дано" и аналитиком, который генерирует идеи и влияет на стратегию. Разберу, откуда появляются мои идеи для тестов.

1. Из данных: Анализ воронки

Это моё первое место поиска.

Я регулярно смотрю на воронку конверсии и ищу:

• Где падает самая большая часть пользователей?
• Где самое низкое качество трафика?
• Где самая высокая variance в результатах?

Пример:

Каталог товаров: 1M пользователей
  ↓ Клик на товар (70% CTR)
Страница товара: 700k пользователей
  ↓ Добавление в корзину (25% conversion)
Корзина: 175k пользователей
  ↓ Оформление заказа (45% conversion)
Чекаут: 78.75k пользователей
  ↓ Успешный платёж (92% conversion)
Покупка: 72.5k пользователей

Идея 1: 70% CTR кажется низким. Может быть, проблема с видимостью товаров? → Тест: улучшить визуальность карточек

Идея 2: 25% conversion на странице товара очень низко. → Анализируем: почему люди не добавляют в корзину? (нет reviews, нет доставки, нет price guarantee) → Тест: добавить социальные доказательства (отзывы)

Идея 3: Drop с 45% на странице заказа — большой. → Возможная причина: форма оформления заказа слишком сложная → Тест: упростить форму (убрать ненужные поля)

2. Из конкурентов: Benchmarking

Это мой второй источник.

Я регулярно проверяю, что делают конкурентов:

• Какой функционал они добавили?
• Какой UI/UX они используют?
• Какие паттерны появились в индустрии?

Пример: Заметил, что Airbnb добавил "Saved listings" (вроде Pinterest). Amazon давно это имел (избранное). → Идея: добавить similar feature в нашу платформу? → Тест: "Save for later" кнопка → Гипотеза: люди вернутся, чтобы купить сохранённые товары

3. Из пользовательских отзывов и feedback

Это самый ценный источник, но его легко игнорировать.

Я регулярно читаю:

• App Store reviews (почему люди дают 1 звезду?)
• Support tickets (какие проблемы?)
• Complaints в соцсетях
• User interviews (что люди говорят о боли?)

Пример:

App Store reviews:
"Слишком долго загружается!"
"Не ясно, когда придёт заказ"
"Доставка дорогая, но я не вижу других вариантов"

→ Идея 1: Оптимизировать загрузку → Идея 2: Показывать дату доставки до оформления заказа → Идея 3: Тест: показать варианты доставки (быстрая $10, обычная $2) на странице корзины

4. Из гипотез о поведении пользователя

Это требует психологического мышления.

Я думаю: "Какое поведение пользователя я хочу изменить и почему?"

Примеры гипотез:

Гипотеза 1: FOMO (Fear of Missing Out)

• "Если показать ограничение по времени/количеству, люди покупают быстрее"
• Тест: "Осталось 3 товара на складе!" бейдж

Гипотеза 2: Social Proof

• "Если показать, сколько людей уже купило, я куплю больше доверия"
• Тест: "1,234 человека купили это на этой неделе"

Гипотеза 3: Anchoring Bias

• "Если показать full price и discount, people видят лучшую сделку"
• Тест: $100 $150 (старая цена) vs просто $100

Гипотеза 4: Default Effect

• "Если выбранный по умолчанию вариант является лучшим, больше людей его возьмут"
• Тест: какой способ доставки выбран по default (быстрая vs экономная)

5. Из данных о когортах

Ищу сегменты, которые работают хорошо, и пробую масштабировать.

Пример:

Усредненно: Conversion Rate = 5%
Но сегмент "пользователи с reviews прочитанными": CR = 8%
Сегмент "пользователи, видевшие video демо": CR = 7.5%
Сегмент "пользователи, пришедшие из Instagram": CR = 3%

Идеи: → Тест 1: Показать reviews всем, видеть, поднимется ли CR → Тест 2: Добавить video demo на страницу товара → Тест 3: Специальная version/campaign для Instagram трафика

6. Из самых опасных ошибок

Это counter-intuitive идеи, но они часто побеждают.

Пример:

• Большинство думают: "Меньше форм, быстрее checkout"
• Но я гипотезирую: "Может, люди ценят больше информации, даже если форма длинная?"
• Тест: добавить доп. поле (например, "Зачем вам это нужно?")

Результат: может быть, это поле предиктирует high-quality customers.

7. Из сезонности и trends

Времена года, события, тренды создают возможности.

Примеры идей:

• Чёрная пятница: Тест: динамическая цена vs фиксированная скидка
• День рождения: Тест: персонализованные offers на день рождения
• Новый год: Тест: gift guides, чтобы помочь выбрать подарок
• Экономический кризис: Тест: выплаты в рассрочку

Мой процесс генерации идей

Еженедельно (1 час):

1. Просмотр воронки конверсии (где biggest drop?)
2. Чтение 20 reviews из App Store
3. Проверка метрик по сегментам
4. Один взгляд на конкурентов
5. Одна случайная идея из психологии

Ежемесячно (2 часа):

1. User research interview (15 min)
2. Deep dive в один segment (какой самый интересный?)
3. Brainstorm с PM и design
4. Prioritize top-10 идей

Prioritization framework:

(Potential impact × Confidence) / (Effort × Complexity)

Пример:
Идея 1: Лучшие reviews
- Impact: +3% (умеренный)
- Confidence: 80% (уже видели эффект в сегменте)
- Effort: 1 неделя (легко)
- Score: (3 × 0.8) / 1 = 2.4 (ВЫСОКИЙ ПРИОРИТЕТ)

Идея 2: Переделать всю страницу
- Impact: +5% (высокий, но неопределённо)
- Confidence: 40% (неуверен)
- Effort: 4 недели (сложно)
- Score: (5 × 0.4) / 4 = 0.5 (НИЗКИЙ ПРИОРИТЕТ)

Дозирование идей

Не все идеи должны быть тестами!

Идеи, которые НЕ нуждаются в A/B тесте:

• Очевидные улучшения (fix баги)
• Низко-risk изменения (переформулировка текста)
• Достижение инструкций (если дизайнер/PM сказал)

Идеи, которые НУЖНЫ A/B тест:

• Изменение основного паттерна UX
• Что-то, что может снизить метрики
• Дорогостоящие изменения
• Что-то, где нет консенсуса

Мой любимый источник идей

Complaints в support и reviews.

Если 5+ человек жалуются на одно и то же, это не случайность. Это real pain.

Пример реальной истории:

Жалобы в support:
"Я не знаю, когда придёт мой заказ"
"Доставка с AliExpress дешевле"
"Не видно, есть ли товар на складе"

→ Идеи для тестов:
1. Email с трэкингом заказа автоматически
2. Показывать stock status: "В наличии", "Заказываем", "Нет"
3. Сравнить цену с AliExpress (может быть, нужна скидка?)

→ Результат: +5% retention из-за лучшей коммуникации

Ошибочные источники идей

❌ Идеи, которые я ИГНОРИРУЮ:

1. "Потому что я хочу это видеть" (мой bias)
2. "Потому что конкурент это сделал" (может не работать в нашем контексте)
3. "Потому что это выглядит красиво" (красота не гарантирует результат)
4. "Потому что руководитель сказал" (даже руководитель может ошибаться, нужен тест)

Вывод

Идеи появляются не из воздуха, они появляются из:

1. Данных (воронка, сегменты, тренды)
2. Пользователей (feedback, reviews, interviews)
3. Конкурентов (бенчмарк, лучшие практики)
4. Психологии (bias, incentives, поведение)

Лучший Product Analyst — это не тот, кто просто анализирует результаты тестов. Это тот, кто генерирует гипотезы и влияет на стратегию продукта. Мой скилл — это способность увидеть проблему в данных и превратить её в тест, который даст ответ.