Небольшие нюансы (часть 2 из 2)
Между усвоением понятия EV и накатыванием прошивки на свою модель оценки стоит сделать несколько важных поправок.
+EV не означает автоматическую отмашку действовать
Мир, к сожалению, это не красивая математическая модель в вакууме, к которой стремится казино, покер и в некоторой степени perfomance маркетинг. Нам важно учитывать:
— Размер ставки
Если EV плюсовой, то это не значит, что можно ставить всё. При проигрыше больше ставить будет нечего.
— Альтернативная стоимость ресурсов
Если потестировать фичу стоит неделю работы команды, при этом вероятность х выхлоп не бьются, то возможно стоит перенаправить силы в другое русло.
— Насколько легко отменить решение
Если цена ошибки невелика, то грех не протестировать.
Если же гипотеза кардинально меняет продукт, и потенциально убирает клиентов \ важного клиента, то её отправляем на глубокий разбор и анализ.
Ресурсы и вероятности
Допустим, у предпринимателя из начала поста все гипотезы оказались +EV. Но время и деньги ограничены. Через месяц команда разбежится, деньги кончатся и жена уйдет.
Из 5 нужно выбрать 3, а чаще всего 1-2.
Тут следует отойти от голых цифр и задать вопрос:
Можно протестировать цвет заголовка рекламы, и узнать что зелёный на зелёном — не лучшее сочетание.
А можно протестировать новый формат, и открыть десяток новых возможностей в будущем.
То есть в условиях ограниченных ресурсов приоритет не чистый +EV, а информация, которая позволит действовать эффективнее в будущем.
Фиксируемся
Для оценки гипотезы я задаю себе следующие вопросы по порядку:
1. Что должно оказаться правдой?
2. Какой самый дешёвый тест надёжно это проверит?
3. Какая базовая вероятность успеха подобных идей?
4. Какой профит при успехе и минус при провале?
5. Что я узнаю и смогу делать по другому в результате теста?
6. Переживу ли я минус и смогу ли откатиться назад?
Отсюда уже считается EV и принимается решение.
Вы могли заметить, что я сказал «базовая вероятность успеха».
Это уже про калибровку внутреннего предсказателя и требует отдельного разбора.
Влепи лукаса, если хочешь, чтобы следующим большим разбором была именно эта тема.
@decision_room
Между усвоением понятия EV и накатыванием прошивки на свою модель оценки стоит сделать несколько важных поправок.
+EV не означает автоматическую отмашку действовать
Мир, к сожалению, это не красивая математическая модель в вакууме, к которой стремится казино, покер и в некоторой степени perfomance маркетинг. Нам важно учитывать:
— Размер ставки
Если EV плюсовой, то это не значит, что можно ставить всё. При проигрыше больше ставить будет нечего.
— Альтернативная стоимость ресурсов
Если потестировать фичу стоит неделю работы команды, при этом вероятность х выхлоп не бьются, то возможно стоит перенаправить силы в другое русло.
— Насколько легко отменить решение
Если цена ошибки невелика, то грех не протестировать.
Если же гипотеза кардинально меняет продукт, и потенциально убирает клиентов \ важного клиента, то её отправляем на глубокий разбор и анализ.
Ресурсы и вероятности
Допустим, у предпринимателя из начала поста все гипотезы оказались +EV. Но время и деньги ограничены. Через месяц команда разбежится, деньги кончатся и жена уйдет.
Из 5 нужно выбрать 3, а чаще всего 1-2.
Тут следует отойти от голых цифр и задать вопрос:
Какая гипотеза даст больше информации, которую я смогу использовать в будущем?
Можно протестировать цвет заголовка рекламы, и узнать что зелёный на зелёном — не лучшее сочетание.
А можно протестировать новый формат, и открыть десяток новых возможностей в будущем.
То есть в условиях ограниченных ресурсов приоритет не чистый +EV, а информация, которая позволит действовать эффективнее в будущем.
Фиксируемся
Для оценки гипотезы я задаю себе следующие вопросы по порядку:
1. Что должно оказаться правдой?
2. Какой самый дешёвый тест надёжно это проверит?
3. Какая базовая вероятность успеха подобных идей?
4. Какой профит при успехе и минус при провале?
5. Что я узнаю и смогу делать по другому в результате теста?
6. Переживу ли я минус и смогу ли откатиться назад?
Отсюда уже считается EV и принимается решение.
Вы могли заметить, что я сказал «базовая вероятность успеха».
Это уже про калибровку внутреннего предсказателя и требует отдельного разбора.
Влепи лукаса, если хочешь, чтобы следующим большим разбором была именно эта тема.
@decision_room