Данных стало не просто больше — их стало больше, чем вопросов, на которые компания собирается отвечать. Инструменты дешевеют, число собираемых показателей растёт почти без ограничений, а способность отличать значимый сигнал от фонового не растёт вообще: она упирается во внимание конкретного человека, у которого по-прежнему есть час на совещание. Проблема появляется именно в этом зазоре — не в том, что руководителю чего-то не хватает, а в том, что стоимость обработки растёт быстрее, чем полнота картины.

Данные не говорят сами за себя

Управленческая иллюзия звучит так: дайте человеку достаточно данных, и правильный вывод станет очевидным. Но данные не содержат готового решения. Они превращаются в информацию только внутри заданного вопроса, а в основание для действия — только внутри модели, которая объясняет, как одно связано с другим.


Возьмём маркетинговый отчет: показы, клики, стоимость перехода, глубина просмотра, время на сайте, заявки, стоимость привлечения, конверсия, продажи, повторные покупки и ещё несколько десятков строк. На экране выглядит убедительно. Руководитель задаёт вопрос: почему упали продажи? Ответа в отчёте нет — и не потому, что показателей слишком много. Потому что причины лежат вне той предметной области, которую отчёт измеряет. Подорожал аукцион. Сменился сезон. Ушли два сильных продавца. Поменялся ассортимент, и рекламу ведут на позиции, которых нет на складе. Отчет описывает каналы; продажи определяются не только каналами. Добавление двадцать первой рекламной метрики не приблизит ответ ни на шаг — оно просто увеличит время, за которое станет понятно, что ответа здесь нет.

Это важное различение. Избыточность данных и их не релевантность — разные болезни, но выглядят одинаково: в обоих случаях человек долго смотрит в экран и не находит основания для решения.

Почему показателей становится больше

Метрики накапливаются не по глупости. У этого есть внятный механизм, и пока он не назван, любой совет «сократите отчетность» звучит наивно.


Добавить показатель дешево и быстро: технически это уже возможно, а объяснение — «пусть будет, вдруг пригодится» — не требует доказательств. Убрать показатель дорого: нужно, чтобы конкретный человек взял на себя ответственность на случай, если через полгода окажется, что именно этой цифры не хватило. Никого никогда не наказывали за лишнюю собранную метрику. За удалённую — вполне могут.


Асимметрия рациональна для каждого участника по отдельности и разрушительна в сумме. Система растёт в одну сторону, потому что в другую сторону у неё нет механизма. Через несколько лет компания обнаруживает у себя сотню показателей, из которых регулярно используются восемь, — и не может назвать никого, кто принял решение собирать остальные девяносто два.

Больше данных — больше уверенности, а не больше точности

До сих пор речь шла о том, что избыток данных стоит времени. Но есть цена дороже.


Когда на панели сорок показателей, среди них практически всегда найдётся несколько, которые движутся в ту сторону, которую руководитель и так собирался выбрать. Кампанию хочется продлить — и вот стоимость клика снизилась, а глубина просмотра выросла. Кампанию хочется остановить — и вот конверсия просела, а отказы подросли. Обе версии подкреплены цифрами, и обе честны в том смысле, что данные не выдуманы.


Так данные меняют функцию: из источника коррекции они превращаются в источник обоснования. Решение принимается прежним способом — по опыту, интуиции, внутренней политике, — но теперь у него есть подтверждение, и оспорить его труднее, чем раньше. Уверенность растёт, точность нет.


Из этого следует главное свойство работающей системы измерений: она должна уметь опровергать. А опровергнуть решение может только показатель, названный заранее — до того, как стало известно, куда он двинулся, — и названный вместе с тем, что произойдет при каждом его значении. Всё остальное — материал для объяснения задним числом, и чем его больше, тем убедительнее получаются объяснения.

Когда измерение подменяет управление


Отсюда видно, чем на самом деле измеряется зрелость аналитики. Не объемом накопленного массива, а тем, насколько быстро и точно система помогает ответить на управленческий вопрос.


Если руководителю, чтобы принять решение, нужно открыть три отчёта, свести их вручную и самому сообразить, какая метрика связана с проблемой, — система передала ему работу, которую должна была сделать сама. Формально компания стала «управляемой на основе данных». Фактически часть управленческого ресурса ушла на обслуживание системы измерений.


Хорошая аналитика не увеличивает количество информации. Она сокращает расстояние между сигналом и решением.

Четыре ошибки, которые это закрепляют

1. Показывать данные без иерархии. Если критический показатель визуально равен второстепенному, система заставляет человека каждый раз заново расставлять приоритеты — то есть выполнять ровно ту работу, ради которой ее строили.


2. Смешивать показатели результата и процесса. Продажи, заявки, стоимость клика и время на сайте могут стоять в одном отчёте, но управленческий вес у них разный, и уравнивание их в правах — не нейтральное оформление, а искажение.


3. Автоматизировать сбор, но не интерпретацию. Компания получает отчёт за секунду и тратит два часа на понимание того, что в нём важно. Экономия произошла не на том участке.


4. Добавлять новые метрики вместо разбора, почему не сработали прежние. Если непонятно, почему имеющиеся показатели не помогли принять решение, следующие не помогут тоже — и по той же причине.

Когда объем действительно помогает


Всё сказанное не означает, что данных нужно меньше по умолчанию. Там, где вопрос известен заранее и стабилен, объём работает напрямую: прогноз спроса, антифрод, ценообразование, тестирование гипотез. Модель знает, что ищет, и каждая дополнительная запись повышает точность. Здесь «собрать всё» — правильная стратегия.

У части данных есть и опционная ценность: их нельзя собрать задним числом. Компания, не писавшая историю заказов, через три года не сможет её восстановить. Так что «удалить половину показателей» относится к тому, что попадает в поле зрения человека, а не к тому, что хранится в базе. Хранение и отображение — разные решения, и путать их не стоит.


Проблема возникает на другом полюсе: там, где вопрос заранее не сформулирован и разбираться в ситуации должен человек. Именно в этой зоне рост объёма перестаёт помогать и начинает мешать — потому что узкое место здесь не в данных, а во внимании.

Что с этим делать

Улучшение аналитики чаще начинается не с нового источника данных, а с удаления половины существующих показателей из отчётов. Вопрос только в том, какую половину, и здесь помогает простая проверка.
По каждой метрике нужно ответить на два вопроса. Первый: назовите последнее решение, которое изменилось из-за неё. Второй: назовите действие, которое последует, если она вырастет, и действие, которое последует, если она упадёт. Если на оба вопроса ответа нет, это не метрика, а украшение — и её место в базе, а не на панели руководителя.


Проверка неприятна тем, что каждый показатель когда-то появился с рациональным объяснением, и отвечать придётся тем самым людям, которые их вводили. Но система, которая собирает всё подряд и показывает всё собранное, постепенно теряет способность показывать главное — а вместе с ней и способность что-либо опровергать.


Информационная система похожа не на склад, а на фильтр. Её задача не в том, чтобы сохранить максимум сведений, а в том, чтобы нужный сигнал дошёл до нужного человека тогда, когда он еще может изменить решение. Всё, что не проходит этот тест, стоит компании внимания — самого дефицитного ресурса из тех, которыми она распоряжается