Содержаниеразделов: 6
  1. Почему отключение - единственное чистое измерение
  2. Что возвращается в первый же вечер
  3. Что не возвращается
  4. То, чего никто не предсказывает
  5. Как провести, никому не навредив
  6. Ради чего эта неделя на самом деле

Полевые заметкиЗАМЕТКА

Выключите его на неделю

После первого месяца чистого сравнения не остаётся, и любое число превращается в спор. Отключение - единственное измерение, которое нельзя оспорить, и делать его стоит намеренно.

Costa3 мин чтения

Короткий ответ

Когда ассистент проработал месяц, ни один отчёт не отделит его вклад от вклада бизнеса: база сдвинулась. Намеренное отключение на фиксированный срок возвращает сравнение, и честная версия - несколько ночей, а не неделя. Первым возвращается ночной завал и повторяющиеся вопросы: сразу и оба измеримо.

Ключевые факты

  • Ассистента можно выключить по каналу и по часам, не трогая ничего остального.
  • Разговоры, пришедшие при выключенном ассистенте, всё равно записываются, поэтому два периода сравнимы.
  • Клиенты видят честное сообщение о нерабочих часах, а не тишину.
  • Тест ставится на сопоставимую неделю, а не на ту, которая удобна.

Ко второму месяцу честного сравнения не остаётся. Состояние «до» протухло, числа двигаются по причинам, к ассистенту не относящимся, и любое утверждение о его вкладе - спор, а не измерение.

Чистый эксперимент доступен ровно один, и он очевидный, и его никто не ставит: выключить.

Почему отключение - единственное чистое измерение

Атрибуция задним числом безнадёжна. Время ответа улучшилось, и ещё три вещи улучшились, и сезон поменялся, и в сентябре кто-то переписал страницу.

Отключение обходит всё это. Что вернулось - то ассистент и держал. Ему не нужна модель бизнеса и не нужно согласие о том, что считать, - именно поэтому оно закрывает споры, которые отчёт закрыть не может.

Что возвращается в первый же вечер

Ночная куча. Она появляется немедленно и целиком и в этом списке наименее удивительна.

Второе - повторяющийся вопрос, и он бьёт сильнее, чем ожидают. Кто-то в компании отвечает на него трижды до обеда первого же утра и вспоминает физически, как это было. Бизнесы, откладывавшие починку страницы два месяца, обычно делают её на неделе после теста.

Что не возвращается

Обычно больше, чем ждали, и вот про эту половину стоит говорить честно.

Канал, которым на самом деле не пользовались. Категория вопросов, которая, как выясняется, приходит два раза в неделю, а не два раза в день. Развесистое правило, на которое кто-то потратил вечер ради сценария, случившегося с запуска один раз. Примерно половина проводивших тест находит хотя бы одну вещь, которой они гордились и по которой никто не скучает.

Это не провал ассистента. Это поправка к истории, которую бизнес рассказывал сам себе, и следующий круг правил от неё становится лучше.

То, чего никто не предсказывает

Реакция сотрудников, и она раскалывается.

Часть испытывает облегчение: отвечать клиентам было той частью работы, которая нравилась, и она тихо исчезла. Другие за два дня обнаруживают, что перестроили неделю вокруг отсутствия очереди и не заметили, как это сделали. Обе реакции - информация о том, как на самом деле перераспределилась работа, и ни одна не попадает ни в какой отчёт.

Как провести, никому не навредив

Сообщение о нерабочих часах должно стоять и быть честным до того, как что-либо выключат: часы работы, когда придёт ответ, и никаких намёков, что человек вот-вот появится.

Берите сопоставимый период, а не удобный, и назовите даты заранее, чтобы никто тихо не включил всё обратно на второе утро. Продолжайте записывать всё, чтобы два периода можно было положить рядом. И ничто из списка границ не меняется: жалобы и деньги по-прежнему уходят людям.

Нескольких ночей обычно хватает. Полная неделя имеет смысл только там, где объём настолько мал, что короткий прогон ничего не покажет, и дисциплина заранее названной даты окончания важнее длительности.

Ради чего эта неделя на самом деле

Не ради доказательства, что ассистент работает. Если провести её ради красивой цифры для слайда, вы отдадите клиентам неделю похуже, чтобы закрыть спор, в котором они не участвовали.

Она ради выяснения, какие его части имеют значение, потому что от этого зависит, куда пойдёт следующий месяц правок. Список, выходящий из теста отключением, короткий, конкретный и неоспоримый, и это единственный артефакт во всей этой теме, который бизнес получает бесплатно, ничего не делая несколько дней.

Мы предлагаем это клиентам примерно через полгода, и те, кто соглашается, обычно что-нибудь после этого выключают насовсем. Это правильный исход, и сказать его вслух стоит: коммерчески нам полагалось бы надеяться на другой.

Вопросы, которые тут возникают

Это не дорогой способ доказать очевидное?
Это дешёвый способ выяснить, что очевидного тут меньше, чем считалось. Каждый бизнес, который его проводит, удивляется хотя бы одному пункту, а примерно половина обнаруживает, что категория, которой они гордились, почти не использовалась.
Клиенты же заметят?
Они заметят более медленные ответы ночью - это и есть измеряемое. Чего они видеть не должны, так это тишины без объяснения, поэтому честное сообщение о часах работы должно стоять до начала теста.
Насколько долго?
Достаточно, чтобы захватить выходные, и достаточно коротко, чтобы никого не тянуло свернуть раньше. Для большинства это несколько ночей, а полная неделя - только там, где объём настолько мал, что короткий срок ничего не докажет.

Поделиться

Читать дальше

Следующий шаг

Аудит на пригодность к агенту

Бесплатно, в браузере, без созвона.

Запустить аудит