За пределами A/B-тестов: вижн — ваш главный компас, а данные — лишь карта (Александр Ульянов)

Product Team Lead, Яндекс Доставка

Что будет

Культ A/B-тестов стал своего рода религией современного продакт-менеджмента. Мы молимся на статистическую значимость, верим в силу контрольных групп и порой приносим в жертву здравый смысл ради «данных». Но что, если этот путь не всегда ведет к инновациям и прорывным решениям?

Фраза «Без A/B-теста не запускаем» стала мантрой в современных продуктовых командах. Но задумывались ли вы, сколько потенциальных инноваций так и не увидело свет из-за «недостаточно убедительных данных»? Сколько решений было принято на основе искаженных выборок?

Этот доклад — не призыв отказаться от метрик, а приглашение к честному разговору о том, как выстраивать здоровую культуру принятия решений.

В рамках доклада:

• Разберем, почему слепая вера в A/B-тесты может приводить к локальным оптимумам вместо глобальных прорывов.
• Обсудим, как создать баланс между продуктовым видением и данными, чтобы не утонуть в бесконечных экспериментах.
• Поймем, в каких случаях A/B-тесты действительно необходимы, а когда они становятся бюрократическим препятствием.
• Поговорим, как внедрять культуру осознанных экспериментов в команду, привыкшую к культу data-driven-подхода.
• Разберем реальные кейсы, где доверие к видению приносило лучшие результаты, чем шаблонная оптимизация метрик.

Доклад будет полезен:

• Менеджерам продуктов любого уровня, которые чувствуют, что утопают в бесконечных A/B-тестах.
• Руководителям продуктовых команд, выстраивающим культуру принятия решений.
• Аналитикам, которые хотят лучше понимать, когда данные могут вводить в заблуждение.
• Всем, кто хочет найти здоровый баланс между аналитическим и интуитивным подходом к развитию продукта.

Презентация доклада