Мышление соединения точек

Разделите точки честно, а не задним числом

Вы уже сделали половину работы: заметили, что провалы совпали с внедрением скрипта. Теперь отключите «режим оправдания» и проверьте, есть ли у точек общая глубинная структура, а не просто временная близость.

1. Сравните когорты. Разбейте сделки на две группы: те, что шли по старому скрипту (до внедрения), и те, что по новому. Если конверсия падает только во второй группе — точка «скрипт» реальна. Если падает и в контрольной группе (например, по входящим заявкам, где скрипт не использовался) — это сезонность.

1. Проверьте механизм. Соединение точек подлинно, когда есть причинная цепочка: новый скрипт → конкретный этап (например, обработка возражений) → потеря сделок. Посмотрите записи звонков: где именно рвётся воронка? Если этап один и тот же во всех провалах — это не совпадение.

1. Спросите «а если бы я не знал о скрипте?» Если бы вы увидели эти цифры без контекста, назвали бы вы причиной сезонность? Если нет — вы рационализируете.

Реальное соединение точек — это когда две области (скрипт и поведение клиента) демонстрируют один и тот же закон: сопротивление на этапе квалификации. Постфактум-история — это когда вы просто хотите, чтобы скрипт не был виноват.

Проведите когортный анализ за 48 часов. Если скрипт виноват — откатите его и тестируйте по частям. Если сезонность — признайте это и скорректируйте план. Точки соединяются только после факта, но вы можете ускорить прозрение, убрав эмоции из данных.

Разделите точки, а не склейте их задним числом

Вы описываете классическую ловушку: две переменные изменились одновременно, а мозг уже строит красивую причинно-следственную линию. Соединение точек здесь работает только ретроспективно — но ретроспектива обязана быть честной, иначе это постфактум-рационализация.

Шаг 1: Разнесите изменения во времени

Если возможно, откатите онбординг на неделю, оставив фичу. Если удержание падает — точка «онбординг» соединяется с результатом. Если остаётся — фича. Это грубо, но даёт чистый сигнал.

Шаг 2: Ищите глубинную структуру, а не совпадение

Спросите: какой механизм связывает фичу с удержанием? Например, фича сокращает время до первого «ага-момента». Если онбординг тоже сокращает его — обе точки ведут к одной причине. Тогда вы соединяете не «фичу» и «рост», а «сокращение времени до ценности» и «рост». Это подлинное прозрение.

Шаг 3: Отделите метрику от когорт

Сравните когорты, которые прошли старый онбординг с фичей, и новые с новым онбордингом без неё. Если разница только в новых — виноват онбординг.

Правило: если вы не можете назвать механизм, по которому фича влияет на поведение, — вы не соединяете точки, вы их придумываете.

Проверьте связь, а не историю

Вы уже сделали главную ошибку: соединили точки до проверки фактов. Ребрендинг и падение продаж — это две точки, но между ними может быть десяток других: сезонность, конкуренты, цена, усталость аудитории. Ваша история «стиль привлёк не тех» — это постфактум-рационализация, а не прозрение.

Как отличить подлинное соединение от натяжки

1. Разделите переменные. Сравните динамику продаж за тот же период прошлого года и за предыдущие 3 месяца. Если в прошлом году был такой же провал в это время — сезонность, а не ребрендинг.
2. Посмотрите на когорты. Разделите клиентов на тех, кто видел новый стиль, и тех, кто не видел (например, по каналам). Если конверсия упала одинаково у обеих групп — связь с ребрендингом слабая.
3. Ищите глубинную структуру. Подлинная связь — это когда новый стиль изменил не охват, а восприятие ценности: время на сайте, повторные покупки, долю в корзине. Если изменился только охват — вы соединили шум.

Правило

Точки соединяются задним числом, но проверяются вперёд. Сформулируйте гипотезу («новый стиль снизил доверие у ядра аудитории») и проведите A/B-тест на 20% трафика. Если через 2 недели разницы нет — ваша история была красивой, но ложной. Ребрендинг мог просто совпасть с отпусками, а продажи упали бы и без него.