❌️️ Эта ошибка в АБ не дает продукту по-настоящему расти Проверка любой гипотезы ассоциирована с рисками. Чем выше риски – тем выше может быть доходность от изменения. И наоборот. На практике, команды часто не хотят рисковать – они хотят стабильно и с минимальными рисками растить продукт. Из-за этого они попадают в ловушку микрооптимизаций: ❌ Изменение цветового оформления блока; ❌ Замена формулировки в заголовке; ❌ Перестановка блоков местами; ❌ Добавление новых фильтров. Да, такие тесты могут показывать статистически значимые результаты. Но если продукту нужен прорывной рост, такие улучшения не спасут. А продукт упрется в локальный максимум, после чего тесты будут показывать только ошибки I рода. Вместо этого нужно соблюдать баланс между микрооптимизациями и амбициозными изменениями. Именно последние помогут ощутимо сдвинуть метрики: 🚀 Новый UX вместо перестановки блоков; 🚀 Принципиально другая механика вместо шлифовки текущей фичи; 🚀 Изменение стратегии привлечения, а не изменение текста заголовка в рекламе; 🚀 Другая модель ценообразования вместо оптимизации конверсии в текущую. Микрооптимизации хороши, когда продукт уже близок к пределу возможностей. Как, например, было у Google'а с его АБ на 50 оттенков голубого в рекламных ссылках. А если рост стагнирует, значит пора тестировать сильные гипотезы, а не оптимизировать пиксели. Настоящий рост приходит через радикальные изменения, а не через бесконечную шлифовку деталей.