Diff-in-Diff: когда A/B-тест невозможен
Difference-in-Differences помогает оценить эффект изменений без рандомизации.
Метод сравнивает изменение метрики относительно изменения от начального показателя похожей контрольной группы.
Например, изменение воронки сначала запустили только в одном регионе. Продажи выросли на 10%.
Это успех или просто сезонность?
DiD сравнит изменение с регионом, где ничего не запускали, и попробует отделить эффект релиза от всего остального.
Метод давно используют в экономике, медицине и государственной политике, где эксперименты часто невозможны или неэтичны.
Важное ограничение: метод предполагает, что без изменений обе группы продолжили бы двигаться примерно одинаково. Если это не так, выводам доверять уже нельзя.
Если нельзя провести A/B, DiD становится наилучшей альтернативой оценить эффект.
❤️ да, было
😈 сравнивал до/после
#pm #product #словарикпродакта
Difference-in-Differences помогает оценить эффект изменений без рандомизации.
Метод сравнивает изменение метрики относительно изменения от начального показателя похожей контрольной группы.
Например, изменение воронки сначала запустили только в одном регионе. Продажи выросли на 10%.
Это успех или просто сезонность?
DiD сравнит изменение с регионом, где ничего не запускали, и попробует отделить эффект релиза от всего остального.
Метод давно используют в экономике, медицине и государственной политике, где эксперименты часто невозможны или неэтичны.
Важное ограничение: метод предполагает, что без изменений обе группы продолжили бы двигаться примерно одинаково. Если это не так, выводам доверять уже нельзя.
Если нельзя провести A/B, DiD становится наилучшей альтернативой оценить эффект.
❤️ да, было
😈 сравнивал до/после
#pm #product #словарикпродакта