📚 Словарь полезных терминов в АБ Вас позвали «на минутку» обсудить эксперимент, а на это ушло два спринта и три созвона? Тогда держите неофициальный словарик сленга AБ-тестирования, который сэкономит вам время и нервы: 🔹 MDE (произносится «мдЭ») – Minimum Detectable Effect и одновременно реакция команды, когда видят требуемый объем выборки и длительность эксперимента. 🔹 А/Б/Ой – тест, где неожиданно победил вариант, которого не было в дизайне. 🔹 SRM (произносится «срам») – Sample Ratio Mismatch. Когда рандомизация как бы есть, но за нее стыдно. 🔹 CUPED (купед) – магическое «сделай дисперсию потише». Все о нем говорят, но почти никто не применяет на практике. 🔹 Bucket (бакет) – ведёрко, куда кидают пользователей и надежды менеджеров. 🔹 Guardrail (гардрейлы) – метрики-подушки безопасности. Чтобы не уволили, когда ключевая «вроде выросла». 🔹 Holdout (холд-аут) группа – священная земля, на которую нельзя шагать. Чтобы помнить, как было «до» внедрения тех самых фичей. 🔹 Бета-кладбище – список отличных идей, умерших от нехватки трафика. 🔹 «Победил здравый смысл» – эвфемизм к «данных не хватило, решение приняли по чуйке». 🔹 FDR (ложный праздник) – сколько раз по регламенту можно радоваться зря. 🔹 Namespace'ы (пространство имён, слои) – «квартиры для тестов», чтобы соседние команды не ругались. 🔹 Post-hoc анализ (пост-хок сказки) – объяснения и гипотезы, родившиеся после завершения теста. Красивые, но поздно. 🔹 Canary Releases (канареечный релиз) – отправили храбрых птенцов первыми в тестовую ветку. Посмотрим, запоют или закашляются. --- Перешли коллегам, чтобы они тоже вас понимали. А также поделитесь недостающими терминами в комментариях – пополним словарик.)
📚 Словарь полезных терминов в АБ Вас позвали «на минутку» обсудить…
Источник
https://t.me/nodatanogrowth/901Канал No Data No Growth | Pavel Bukhtik · опубликовано 4 сент. 2025 г.
Из этого канала
- #902🐾 Почему маленькие шаги без больших прыжков не работают Раньше я считал, что…
🐾 Почему маленькие шаги без больших прыжков не работают Раньше я считал, что уверенный рост – это про медленное, но систематическое развитие.
- #903🗣 Истории ребят, кто прошел обучение по А/В Отзывы лучше всего отражают…
🗣 Истории ребят, кто прошел обучение по А/В Отзывы лучше всего отражают качество обучения.
- #908🔍 Читерский способ для поиска точек роста в продукте Типовая задача…
🔍 Читерский способ для поиска точек роста в продукте Типовая задача продуктового аналитика — находить точки роста. Т. е.
- #895🔓 Эти 48 навыков в АБ выводят карьеру аналитика на новый уровень 217 человек –…
🔓 Эти 48 навыков в АБ выводят карьеру аналитика на новый уровень 217 человек – столько человек я обучил АБ тестированию за последний год.
- #886🇲🇽 Разбор задач с собеседования в Plata На собеседовании в Plata дается ровно…
🇲🇽 Разбор задач с собеседования в Plata На собеседовании в Plata дается ровно 10 минут, чтобы решить «эти» 6 задач. Решаете 4 и более – проходите дальше.