Один быстрый этап не доказывает улучшения всего процесса.
Сравнить до и после на сопоставимых данных
Более короткий срок после запуска — наблюдение. Следующий вопрос: что ещё изменилось вместе с новым порядком?
Представим, что до пилота типовая заявка проходила передачу за 24 часа, а во время пилота — за 16. Эти значения выглядят обнадёживающе. Но если в первом периоде было больше нестандартных заказов или меньше сотрудников, разницу нельзя целиком объяснить новым правилом.
Сохранить условия измерения
Сравнивайте одинаковые события начала и окончания, одну шкалу времени и одинаковое определение возврата. Запишите объём и состав заказов, доступность команды, праздники и другие изменения. При заметно разных типах заявок сначала посмотрите на каждый тип отдельно.
Если границы сопоставимы, сокращение с 24 до 16 часов составляет 8 часов, или примерно 33,3% от исходного срока. Это описывает величину изменения показателя. Сам расчёт не доказывает причину и не показывает, сохранится ли результат при большей нагрузке.
Увидеть неопределённость
У маленькой выборки показатели могут сильно меняться из-за нескольких случаев. Смотрите на отдельные значения, медиану, длинные задержки и незавершённые заявки. Если новое правило применяется только к удобным заказам, результат нельзя переносить на все заказы без дополнительной проверки.
По возможности используйте сопоставимую группу, работающую прежним способом в тот же период. Но и она может отличаться опытом людей или составом задач. Для небольшого рабочего пилота достаточно честно зафиксировать ограничения и выбрать следующий шаг: закрепить наблюдаемое улучшение в этих границах или собрать дополнительные данные. Формулировка «результат пока неясен» допустима.
Скорость, качество и стоимость
Процесс может стать быстрее на одном участке и потребовать больше работы на другом. Поэтому одного показателя обычно недостаточно.
Допустим, руководитель стал согласовывать заявки быстрее, но производство чаще возвращает их из-за неверных условий. Срок согласования сократился. Полный путь до принятия заказа при этом может удлиниться, потому что добавились исправление и повторная очередь.
Разделить показатели
Полный срок показывает, сколько ждёт получатель. Трудозатраты — сколько времени участники непосредственно работали. Выпуск — сколько результатов завершено за период. Доля возвратов — какая часть заявок потребовала повторной обработки. Высокая занятость людей сама по себе не означает большего выпуска.
Для доли возвратов нужно определить числитель и знаменатель. Например: число заявок, возвращённых хотя бы один раз, делённое на число переданных заявок той же группы. Если одну заявку вернули трижды, в такой доле она учитывается один раз. Количество повторных возвратов можно считать отдельно.
Сопоставить последствия
В условном примере до изменения вернули 4 из 20 заявок, после — 2 из 20. Это 20% и 10%, снижение на 10 процентных пунктов, или на 50% относительно прежней доли. Выборка небольшая: расчёт верен, но устойчивость эффекта ещё предстоит проверить.
Если внедрение добавило время на проверку формы, включите его в трудозатраты. Если освободившиеся часы помогли завершать больше заказов, покажите выпуск. Если расходы не уменьшились, не называйте результат денежной экономией. В отчёте достаточно основной метрики и нескольких показателей, которые позволяют заметить перенос проблемы на другой участок.
Закрепить порядок или пересмотреть гипотезу
Завершение пилота — момент решения. Новый порядок нужно либо принять в определённых границах, либо изменить, либо остановить.
Если типовые заявки стали проходить быстрее, качество не ухудшилось, а участники способны поддерживать порядок, его можно закрепить для проверенной группы. Но результат на одной команде ещё не показывает, как правило поведёт себя при другой нагрузке или на нестандартных заказах.
Сохранить то, что поддерживает результат
Назначьте владельца дальнейшего контроля, обновите инструкцию и укажите, где находится её действующая версия. Договоритесь о периодичности просмотра показателей и событиях, при которых процесс снова разбирают. Например, меняется состав заказов или растёт число возвратов. Частота контроля зависит от скорости и последствий процесса.
Если эффект неясен, укажите, каких данных не хватает и как их получить. Продлевать пилот бесконечно тоже не стоит: следующая проверка должна иметь вопрос и срок. Если ухудшение подтверждено, вернитесь к согласованному безопасному порядку и отдельно разберите заявки, которые ещё проходят новый маршрут.
Собрать итог на одной странице
В отчёте нужны исходная проблема, изменение, границы пилота, данные до и после, ограничения и принятое решение. Отдельно запишите, что получилось узнать, даже если гипотеза не подтвердилась. Например, комплектность улучшилась, но очередь сохранилась из-за режима согласования. Это основание для нового исследования, а не повод объявлять прежнее изменение успехом по другой метрике.
Масштабировать удобнее постепенно: добавить новый тип заявок или следующую команду и проверить, какие предположения перестали работать. У процесса остаётся владелец и после завершения учебного проекта. Его задача — замечать, когда условия изменились и прежний порядок больше не даёт ожидаемого результата.
Короткая проверка · по желанию
Пилот ускорил 12 типовых заявок одной команды. Можно ли распространить результат на все заказы?
Главное из урока
Результат и контроль
Сопоставьте похожие заявки в одинаковых границах. Запишите результат, ограничения вывода и следующий шаг; назначьте владельца дальнейшего контроля.
Отметка сохраняется только в этом браузере.