Skip to content
  1. Главная
  2. Решения
  3. Как доказать, что изменение сработало?
Отчёт «День» · Что делать сейчас · План-факт

Сработало ли изменение — ответ цифрой против честной базы

Рост после изменения ещё не доказывает, что дало его именно оно. В KO ожидание записывается гипотезой до изменения, замер сравнивает метрику за равные отрезки до и после, а итог ставит человек, и среди исходов есть «ушло само». Цель, факт и итог спринта остаются цифрами, с которыми можно идти на разговор о бюджете.

Для кого: Growth

Сработало ли изменение — ответ цифрой против честной базы
Ситуация

Когда впереди отчёт за квартал или разговор о продлении бюджета, я хочу показать, что изменение сработало, против честной базы, чтобы отстоять бюджет цифрой.

Что меняется

Без KO

С KO

Изменение сделали, а чего от него ждали, не записал никто, и через месяц любой рост можно назвать успехом

Гипотеза записана до изменения: метрика, величина, уверенность и срок проверки

«До» и «после» сравнивают на глаз и за разные отрезки, и праздники путают картину

Замер сравнивает метрику за срок проверки после отметки «Сделана» и за столько же дней до неё и называет другие гипотезы на той же метрике

Метрика вернулась сама, в отчёт это уходит победой команды, и следующий план завышен

У итога три исхода: сработало, не сработало, ушло само

Перед разговором о бюджете цифры собирают из трёх мест, и в каждом они свои

Цель из «Планирования», факт и прогноз стоят в одной таблице «План-факт», а итог спринта сохраняется снимком

На языке денег

Дороже всего обходится успех, который пришёл сам

Если рост, пришедший сам, записать в заслугу изменения, следующий план строится на ожиданиях, которых нет, и бюджет уходит туда, где он не работает. Поэтому в KO у итога есть исход «ушло само», замер подсказывает итог, но не ставит его, а строка «Просело» предупреждает, когда цель выросла за счёт другой метрики, — если эту метрику указали в гипотезе.

Как это устроено

Что настроить и что вы увидите

Увидеть

Записать ожидание до изменения

Доказать можно только то, чего ждали заранее. Гипотеза в KO — это изменение с ожидаемым эффектом: метрика и величина, от и до. Без метрики и величины она не сохраняется, потому что проверять её не с чем. К ней ставятся уверенность (уверены, должно помочь, проба) и срок, через который смотреть эффект. Можно добавить ранний признак, то есть метрику, которая сдвигается раньше цели, и метрику, которая не должна просесть. Гипотеза заводится из находки «Что делать сейчас» кнопкой «+ Гипотеза» или прямо в отчёте «День». У находки есть блок «Как проверить»: метрика, цель и период.

Подробнее о модуле
Записать ожидание до изменения
Проверить

Сравнить с честной базой

Когда изменение сделано, гипотеза получает статус «Сделана». Строка «По замеру» появляется, когда срок проверки прошёл: она сравнивает метрику за срок проверки после этой отметки и за столько же дней до неё, а подсказка называет сравниваемые даты. Если ту же метрику в те же дни меняли другие гипотезы, подсказка их перечислит: итог у них общий, и замер его не разделит. Ранний признак не сдвинулся к своему дню — отчёт «День» скажет, что гипотезу можно снимать, не дожидаясь срока. В «Фокусе» над этим видны цель спринта, темп и прогноз к последнему дню, а плитка цели показывает, сколько закрывают гипотезы в работе.

Подробнее о модуле
Сравнить с честной базой
Решить

Показать итог цифрой

Итог гипотезы ставит человек: сработало, не сработало или ушло само. «Ушло само» значит, что метрика вернулась, пока мы ничего не делали, и в «сработало» оно не засчитывается, иначе следующие ожидания будут завышены. В конце спринта «Подвести итог» собирает цифры цели и KPI, а «Зафиксировать итог» сохраняет их снимком, который потом открывается кнопкой «Итог спринта». Для разговора о бюджете есть «План-факт»: цель из плана проекта, факт по неделям или месяцам и прогноз выполнения. Колонка «Итог» считает значение за выбранный вами отрезок столбцов.

Проверки «Диагностики»
Подробнее о модуле
Показать итог цифрой
Подключение

Что подключить

  1. В «Планировании» заведите план: периоды, метрику с ролью «Цель» и её значения по периодам. Против него KO считает темп и итог
  2. Перед изменением заведите гипотезу: метрика, величина и срок проверки, а если знаете — ранний признак и то, что не должно просесть
  3. Когда изменение сделано, отметьте гипотезу «Сделана», а через срок поставьте итог
  4. Перед отчётом добавьте в «Отчёты» секцию «План-факт» с этим планом, а в конце спринта подведите итог
FAQ

Неудобные вопросы

Нет, замер показывает совпадение по времени, а не доказательство. Метрику в те же дни могло сдвинуть что-то другое, поэтому замер только подсказывает итог, а ставит его человек. Если ту же метрику меняли другие гипотезы, подсказка их назовёт. У находок «Что делать сейчас» есть ещё «Проверка вывода»: сверен ли вывод по второму признаку в данных и что ещё менялось в том же окне.

«Ушло само». Такой исход не засчитывается как «сработало»: иначе команда привыкает к эффекту, которого не было, и следующие ожидания завышены.

Нет, если у гипотезы есть ранний признак. Это метрика, которая сдвигается раньше цели, и её проверяют в свой день, до конца срока. Не сдвинулась — отчёт «День» скажет, что гипотезу можно снимать.

Если при заведении гипотезы указать «Что может просесть», отчёт «День» сравнит и её. Упала — под итогом появится строка «Просело». Прежде чем ставить «сработало», решите, стоит ли рост цели такой цены.

Гипотезы и итог спринта меняет менеджер проекта, цель и KPI может выбрать любой участник. Итог спринта сохраняется снимком и потом открывается только для чтения, поэтому к разговору о бюджете цифры не поменяются.

Сработало ли изменение — ответ цифрой против честной базы

Поймите, что убрать, что починить и что масштабировать — на ваших реальных данных.

Vitaly, co-founder of KO
Vitaly Продукт и продажи
Azat, co-founder of KO
Azat Инженерия

Демо проведут основатели, а не менеджер по продажам — мы сделали KO после лет работы с ростом на битых цифрах.

Заказать бесплатное демо

Назначим за один рабочий день. Без спама.

Пожалуйста, введите имя.
Пожалуйста, введите фамилию.
Пожалуйста, введите корректный номер телефона.
Пожалуйста, введите корректный email.
Пожалуйста, введите название компании.
Пожалуйста, выберите роль.

Отправляя форму, вы соглашаетесь, что KO может связаться с вами, как описано в Политике конфиденциальности.