Аудит аналитики: проверка контура за две недели
Что именно проверяется при аудите данных, какие находки обнаруживаются чаще всего, как выглядит результат и почему такую проверку разумно делать до покупки системы аналитики, а не после.
Аудит аналитики — это проверка того, можно ли доверять цифрам, по которым компания принимает решения. Занимает одну-две недели, не требует внедрения чего-либо и почти всегда меняет представление руководителя о состоянии данных.
Разберу, что именно проверяется, как выглядит результат и почему аудит стоит делать до, а не после покупки системы аналитики.
Что проверяется
Проверка идёт по пяти направлениям, и каждое отвечает на свой вопрос о пригодности данных для управления.
Пятое направление даёт больше всего неожиданных результатов. Регулярно выясняется, что отчёты формируются, рассылаются и не открываются — либо открываются, но решения по ним не принимаются, потому что цифры не сходятся с ощущением руководителя и он им не доверяет.
Как выглядит проверка источников
| Что смотрим | Как проверяется | Типичная находка |
|---|---|---|
| Полнота полей | Доля заполненных значимых полей за период | Источник обращения заполнен у трети записей |
| Дубли | Поиск одинаковых объектов под разными записями | Крупный клиент заведён четырьмя способами |
| Разрывы истории | Непрерывность данных по периодам | История до смены системы недоступна |
| Стыковка систем | Сверка пересекающихся сумм между источниками | Сделки в CRM не сходятся с отгрузками в учёте |
| Задержка записи | Разница между датой события и датой внесения | Сделки заводятся пачкой в конце месяца |
Каждая находка имеет управленческие последствия, и в отчёте они формулируются именно так, а не в технических терминах. «Источник обращения заполнен у трети записей» означает, что решения о рекламном бюджете принимаются по трети данных, — и это уже разговор, понятный руководителю.
Проверка методики и цепочки
Техническое состояние данных — половина картины. Вторая половина в том, договорилась ли компания о том, как считать, и сколько людей стоит между источником и отчётом.
Методика. Проверяется наличием письменного документа с определениями. Если его нет, проводится короткий тест: три руководителя из разных зон независимо отвечают, что считается сделкой и каким днём признаётся выручка. Расхождения в ответах — это будущие споры на каждом совещании, и никакая система их не снимет.
Цепочка. Считается число ручных шагов между источником и готовым отчётом. Каждый шаг — это точка отказа и зависимость от конкретного человека. Один Excel в середине означает, что отчётность живёт, пока сотрудник на месте и не в отпуске.
Прослеживаемость. Берётся любое число из отчёта и делается попытка дойти до первичных записей. Если путь занимает больше нескольких минут или требует участия автора отчёта, доверие к цифрам будет низким независимо от их корректности.
Пройду пять направлений и дам список находок с управленческими последствиями. По итогу будет ясно, какие вопросы закрываются уже сейчас, а что нужно начать фиксировать.
Проверка использования
Направление, которое чаще всего пропускают, а оно объясняет главный парадокс: данные есть, отчёты строятся, решения принимаются по ощущениям.
- Кто открывает отчёты и как часто — статистика есть в любой системе
- Какие решения за последний квартал приняты по цифрам из них
- Сколько раз запрашивались выгрузки в таблицах вместо готовых панелей
- Есть ли регулярный разбор с ответственными за отклонения
- Совпадают ли названия показателей в отчётах и в разговорах на совещаниях
Третий пункт — самый информативный. Регулярные просьбы прислать выгрузку означают, что существующие отчёты не закрывают реальные вопросы. Это указывает не на нехватку данных, а на то, что отчётность строилась от возможностей систем, а не от управленческих потребностей.
Самый быстрый способ понять состояние аналитики в компании — задать один вопрос трём руководителям по отдельности: сколько составила выручка за прошлый месяц. Если названы три разные цифры, дальше можно не проверять: методики нет, справочники не сведены, а каждое совещание начинается со сверки. Этот тест занимает пять минут и предсказывает результаты полноценного аудита с высокой точностью.
Что даёт аудит
Три результата, каждый со своей ценностью.
Реалистичная оценка проекта. После проверки становится понятно, сколько работы потребует построение контура и какие вопросы можно закрыть быстро. Без этого любая оценка сроков и бюджета — гадание, и расхождение обычно кратное.
Список быстрых улучшений. Часть находок исправляется организационно за недели и без бюджета: правила заполнения полей, единый справочник, письменные определения. Эти изменения дают эффект независимо от того, будете ли вы что-то внедрять дальше.
Понимание приоритетов. Аудит показывает, какие управленческие вопросы стоят перед компанией и какие данные для них нужны. Дальше работа идёт от вопросов, а не от того, что удалось выгрузить, — и это меняет результат сильнее выбора платформы.
Аудит редко находит то, чего в компании не подозревали. Он находит то, о чём знали по отдельности в разных отделах и что никто не собрал в одну картину.Владимир Герасимов
Когда аудит особенно нужен
- Перед внедрением аналитики. Чтобы оценка проекта относилась к вашей ситуации, а не к абстрактной. Порядок работ разобран в статье про внедрение аналитики.
- После неудачного внедрения. Чтобы понять, где остановился прошлый проект и что из сделанного можно переиспользовать.
- При смене учётной системы. Проверить, что история переносится и сопоставимость сохраняется.
- При расхождении цифр между отделами. Самый частый повод: три версии выручки на совещании.
- Раз в год для устоявшегося контура. Данные деградируют незаметно, и регулярная проверка предотвращает накопление проблем.
Отдельно стоит сказать про второй случай. Компании, у которых внедрение не пошло, часто начинают со смены подрядчика или платформы — и повторяют путь заново. Проверка обычно показывает, что технически сделано больше, чем кажется, а не хватает методики и назначенного ритма разбора. Это дешевле исправить, чем начинать сначала. Общая архитектура, к которой ведёт работа, описана в разборе единого контура управления бизнесом.
Проведу проверку и покажу, где именно расходятся определения и справочники. По итогу — карта расхождений и порядок их устранения, начиная с того, что даёт эффект быстрее всего.
Как проходит проверка
Порядок работ устроен так, чтобы к концу первой недели уже была понятна общая картина, а вторая уходила на детали и формулирование выводов.
- Разговоры с зонамиПо часу с руководителями продаж, маркетинга, финансов и операций. Что считают, чем пользуются, каких данных не хватает.
- Инвентаризация системПолный список мест, где живут рабочие данные, включая личные таблицы сотрудников.
- Технические проверкиПолнота, дубли, разрывы, стыковки, задержки внесения. Делаются запросами к данным.
- Сверка методикТри независимых ответа на одни и те же вопросы об определениях показателей.
- Разбор отчётностиЧто формируется, кто открывает, какие решения принимаются.
- Формулирование выводовНаходки переводятся на язык управленческих последствий и приоритизируются.
Первый пункт даёт больше половины результата, хотя выглядит менее строго, чем технические проверки. Именно в разговорах выясняется, какие вопросы у людей есть и почему они не закрываются существующими отчётами — данные покажут состояние, но не покажут потребность.
Чего аудит не делает
Стоит сразу очертить границы, чтобы ожидания были верными. Аудит не исправляет данные — он показывает их состояние. Не строит панелей и не настраивает выгрузок. Не выбирает платформу, хотя даёт основания для выбора. И не заменяет решения о том, что компании нужно измерять: этот вопрос остаётся управленческим, аудит лишь показывает, что для ответов есть, а чего нет.
Ещё одно ограничение: проверка отражает состояние на конкретный момент. Если через полгода компания сменит учётную систему или откроет направление, часть выводов устареет. Поэтому результат аудита имеет смысл использовать в ближайшие месяцы, а не откладывать в стол до лучших времён — данные меняются вместе с бизнесом, и через год картина будет другой. Как поддерживать пригодность данных постоянно, разобрано в статье про аналитику данных, а как встроить регулярную проверку в управленческий цикл — в разборе управленческой аналитики.
Типичный отчёт по результатам
Чтобы было понятно, что вы получаете на выходе, опишу структуру. Документ короткий — восемь-двенадцать страниц, потому что длинный не читается и не используется.
| Раздел | Содержание |
|---|---|
| Управленческие вопросы | Список решений, которые компания принимает регулярно, с отметкой, какие обеспечены данными |
| Карта источников | Где живут данные, в каком состоянии, что с чем стыкуется |
| Находки | Проблемы с управленческими последствиями, отсортированные по значимости |
| Быстрые улучшения | Что исправляется организационно за недели и без бюджета |
| Порядок работ | Последовательность построения контура с оценкой сроков по этапам |
Четвёртый раздел обычно оказывается самым полезным в первые месяцы. Правила заполнения полей, единый справочник контрагентов, письменные определения показателей — всё это не требует ни платформы, ни бюджета, но именно эти изменения определяют, будет ли работать любая последующая автоматизация. И начинать их нужно раньше остального: эффект приходит с накоплением данных, то есть через месяцы.
Пятый раздел отличается от типового коммерческого предложения тем, что содержит и вариант «ничего не внедрять». Иногда правильный ответ по итогам проверки — привести в порядок первичный учёт и вернуться к вопросу через полгода. Это честный результат, и он тоже стоит потраченных на аудит двух недель.
Стоимость и формат работы
Аудит стоит несопоставимо меньше проекта внедрения и делается независимо от того, кто будет строить контур дальше. Это важное свойство: проверка, выполненная тем, кто затем продаёт внедрение, имеет очевидный конфликт интересов — заинтересованность в том, чтобы находок оказалось побольше.
Формат работы обычно такой: доступ на чтение к системам, где живут данные, четыре-пять часовых разговоров с руководителями зон, две недели на анализ и подготовку выводов, финальная встреча с разбором результатов. Участие сотрудников компании ограничено разговорами и выдачей доступов — отвлечение минимальное.
Отдельно стоит договориться о том, что результат остаётся у компании в полном виде, включая запросы и расчёты, использованные при проверке. Это позволяет повторить измерения самостоятельно через полгода и увидеть динамику — а также не зависеть от исполнителя при следующей проверке.
Практически это означает, что аудит окупается независимо от дальнейших решений: даже если по его итогам компания решит ничего не внедрять, она получит понимание того, какие данные у неё есть и каким из них можно доверять. Это знание само по себе меняет качество управленческих обсуждений — исчезает главный источник затяжных споров о том, чья цифра правильная.
С чего начать прямо сейчас
Часть проверки можно провести самостоятельно за один день и получить представление о масштабе задачи до любых внешних работ.
- Спросите трёх руководителей по отдельности о выручке за прошлый месяц — сравните ответы
- Посмотрите долю сделок с заполненным источником обращения за квартал
- Возьмите любое число из управленческого отчёта и попробуйте дойти до первичных записей
- Посчитайте, сколько ручных шагов проходит отчёт от выгрузки до готового вида
- Проверьте статистику открытий панелей за последний месяц
Пять проверок дают достаточно материала, чтобы понять, находится ли компания в приемлемом состоянии или данные требуют серьёзной работы. Если хотя бы три из пяти дали неутешительный результат, полноценная проверка окупится: обнаружится больше, чем видно с поверхности, и главное — станет ясен порядок исправления.
Начинать при этом лучше не с покупки инструментов, а с закрытия организационных пробелов — они дешевле и определяют, будет ли работать всё последующее.
Такой порядок — сначала договорённости и правила, потом инструменты — экономит и деньги, и время, и доверие команды к результату.
Аудит аналитики полезно проводить и как самостоятельную процедуру, и как первый этап более крупного проекта. В обоих случаях его результат — не оценка качества чьей-то работы, а карта состояния данных, по которой понятно, что делать дальше.
Частые вопросы
Это проверка того, можно ли доверять цифрам, по которым компания принимает решения. Проверяются источники данных, их стыкуемость между собой, наличие письменной методики, число ручных шагов в цепочке и то, как отчёты используются на практике.
Занимает одну-две недели и не требует внедрения чего-либо — это диагностика, а не проект.
Потому что стоимость и сроки проекта внедрения определяются состоянием данных, а не выбором платформы. Оценка, данная без проверки источников, относится к абстрактному проекту.
Типичный сценарий без аудита: лицензии оплачены, два месяца ушло на настройку, а дальше выясняется, что клиенты в CRM и учётной системе не связаны — сроки уходят вправо, деньги тикают.
Пять повторяющихся вещей: значимые поля заполнены частично, один объект заведён несколькими записями, история обрывается на смене системы, суммы в разных системах не сходятся, данные вносятся с задержкой в недели.
Плюс организационные находки: отчёты формируются, но не открываются, а решения принимаются по ощущениям, потому что цифрам не доверяют.
Список находок с управленческими последствиями и порядком устранения. Каждая формулируется не технически, а через решение: «источник обращения заполнен у трети записей» означает, что бюджет распределяется по трети данных.
Плюс оценка того, какие управленческие вопросы можно закрыть уже сейчас, а для каких сначала нужно начать фиксировать данные.
Одна-две недели для компании с тремя-пятью источниками. Основное время уходит не на технический разбор, а на разговоры с людьми: как заполняются поля, что считается сделкой, кто и когда смотрит отчёты.
Технические проверки — полнота, дубли, стыковки — делаются быстрее, но без организационного контекста их результаты трудно интерпретировать.
Технические проверки — да, если есть аналитик: полнота полей, дубли и разрывы истории считаются запросами к данным. Сложнее с двумя вещами.
Первая — сверка методик между зонами: люди внутри компании привыкли к своим определениям и не замечают расхождений. Вторая — оценка использования: спросить коллег, открывают ли они отчёты, и получить честный ответ изнутри труднее, чем со стороны.
Порядок обычно такой: сначала закрываются организационные пробелы — правила заполнения полей и письменные определения показателей, потому что их эффект отложен на месяцы. Параллельно сводятся справочники, без которых системы не соединяются.
И только потом выбирается инструмент и собирается автоматическая цепочка. Обратный порядок приводит к быстрому получению цифр, в которые никто не верит.
Раз в год для устоявшегося контура и обязательно после крупных изменений: смены учётной системы, открытия направления, слияния или реорганизации.
Данные деградируют незаметно: определения расходятся, поля перестают заполняться, накапливаются дубли. Внешне это выглядит как «система стала врать», хотя система работает так же — изменилось то, что в неё приходит.