M02
Как выбрать показатель под задачу
Редакционная аналитика
С каким вопросом сюда приходят
В статистике десятки цифр. На какие из них смотреть?
Самый честный ответ: сначала нужно понять, какое изменение вы ждёте от материала.
Платформы предлагают готовый набор показателей. Поэтому команда начинает измерять то, что проще получить: охват, просмотры, лайки, подписки. Эти числа могут быть полезны. Проблема начинается, когда доступная цифра незаметно становится целью всей работы.
Материал должен был помочь людям разобраться в сложном изменении, а оценивается по просмотрам. Серия должна была привести нужных героев, а обсуждается количество реакций. Инструкция должна была сократить число ошибок, а в отчёт попадает охват.
Главная мысль
Метрика — не результат, а несовершенный след результата. Выбирайте не самую заметную цифру, а несколько сигналов, которые связаны с задачей материала и помогают принять следующее решение.
Один показатель почти никогда не рассказывает всю историю. Но это не повод собирать всё подряд. Хорошая система измерения обычно компактна: один главный показатель, два поясняющих сигнала и заранее понятное решение.
Сначала вернитесь к изменению
В M01 задача публикации формулировалась через человека и ожидаемый сдвиг:
После материала
[конкретные люди в конкретной ситуации]
смогут / поймут / заметят / решат
[одно изменение].
Теперь нужен ответ на другой вопрос:
Какой след могло бы оставить это изменение?
Если человек должен заметить новую возможность, ближним следом может быть охват именно нужной группы, а более сильным — прямые запросы по названию или узнавание в разговоре.
Если должен разобраться, полезны не только дочитывания, но и способность верно пересказать различие, содержательные вопросы, снижение типичной ошибки.
Если должен узнать себя, важны ответы с собственными ситуациями, сохранения для возвращения, переход к диагностике.
Если должен сделать шаг, считать нужно не все клики, а завершённое релевантное действие и места, где люди останавливаются.
Метрика выбирается от задачи к следу, а не от панели статистики к удобному объяснению.
  1. Шесть уровней показателей
Производство
Сколько материалов выпущено, сколько времени заняла работа, сколько стоил выпуск, сколько раз материал возвращался на доработку.
Эти показатели нужны, чтобы управлять процессом. Они не говорят, был ли материал нужен аудитории.
Доставка
Показы, охват, доставленные письма, позиции в поиске, число людей в канале.
Они показывают возможность контакта. Показ ещё не означает, что человек заметил материал.
Внимание
Открытие, просмотр, время, глубина, удержание, дочитывание.
Это след потребления. Долгий просмотр может означать интерес, сложность, повторное воспроизведение или то, что вкладка осталась открытой.
Реакция
Сохранение, ответ, комментарий, пересылка, возврат.
Реакция показывает действие вокруг материала, но не сообщает его мотив. Материал пересылают и потому, что он полезный, и потому, что он возмутительный.
Следующий шаг
Переход, регистрация, скачивание, вопрос, участие, попытка применить метод.
Этот уровень ближе к задаче. Но на действие влияют цена, форма, срок, доверие и множество других условий.
Долгий эффект
Возврат, повторное участие, снижение нагрузки, рост доверия, изменение рабочей практики, репутация, устойчивые отношения.
Самое важное часто проявляется медленно и не помещается в статистику одной платформы.
Уровни не образуют обязательную воронку. Человек может прочитать материал и изменить решение, не поставив ни одной реакции. Сотрудник может использовать инструкцию из внутренней базы, не создавая публичного просмотра. Система нужна, чтобы не выдавать ближайший доступный след за весь эффект.
  1. Один главный показатель и два поясняющих
Главный показатель должен быть ближе всего к ожидаемому изменению и достаточно надёжно собираться.
Поясняющие сигналы помогают понять, почему главный показатель изменился или не изменился.
Например, задача материала — привести подходящих участников на профессиональную встречу.
• Главный показатель: завершённые регистрации людей, соответствующих условиям.
• Поясняющий: переходы на страницу встречи из материала.
• Поясняющий: ответы и вопросы, по которым видно, как люди поняли предложение.
Если переходов мало, проблема может быть в доставке или входе. Если переходов много, а регистраций мало, нужно смотреть предложение, форму, цену или условия. Если регистраций достаточно, но приходят не те люди, исходная формулировка привлекла неверную ситуацию.
Один показатель сообщил бы только «много» или «мало». Связка помогает найти место разрыва.
  1. Абсолютное число и доля отвечают на разные вопросы
Сто переходов могут быть сильным результатом при тысяче релевантных просмотров и слабым при миллионе случайных показов.
Поэтому нужен знаменатель:
доля переходов =
число переходов /
число людей, у которых была реальная возможность перейти
Но доля без масштаба тоже обманывает. Пятьдесят процентов из двух человек не дают устойчивого вывода.
Смотрите на пару:
• сколько действий произошло;
• какую долю от реальной возможности они составили.
И всегда уточняйте, что платформа называет просмотром, охватом, уникальным пользователем или вовлечением. Одинаковое слово в разных системах может означать разное действие.
  1. Сравнивать можно только сопоставимое
Число становится понятнее рядом с базой сравнения. Но сравнение должно отвечать на вопрос.
Нечестно напрямую сравнивать:
• массовую новость и узкий профессиональный разбор;
• материал с рекламой и без неё;
• короткий ролик и длинный текст только по просмотрам;
• разные сезоны;
• старую и новую аудиторию канала;
• публикации с разными следующими шагами;
• периоды, в которых платформа меняла правила подсчёта.
Прежде чем сказать «этот формат работает лучше», проверьте, были ли сопоставимы тема, задача, аудитория, распространение и определение показателя.
Иногда честный ответ — сравнение пока невозможно. Это полезнее, чем уверенный вывод из несопоставимых чисел.
  1. Качественный сигнал — тоже данные
В медиаработе важная информация часто приходит словами:
• человек точно описал свою ситуацию;
• задал вопрос, которого команда не ожидала;
• повторил ваше различие своими словами;
• назвал причину отказа;
• принёс пример из собственной работы;
• сотрудник перестал задавать один и тот же вопрос;
• партнёр использовал материал в разговоре;
• герой пришёл по рекомендации читателя.
Один комментарий не становится мнением всей аудитории. Но он может быть сильным сигналом о механизме, новой ситуации или ошибочной гипотезе.
В тестировании рекомендательного бота для курса по ИИ фраза «бот не понимает всю сложность моей индивидуальной ситуации» была важнее абстрактной оценки удовлетворённости. Она показала не просто недовольство ответом, а несоответствие между обещанием механики и тем, что короткая автоматическая диагностика способна сделать.
Так качественный сигнал помогает понять, что именно нужно проверять дальше.
  1. Показатель должен вести к решению
Перед сбором любой цифры спросите:
Что мы сделаем иначе, если показатель окажется высоким, низким или не изменится?
Например:
Сигнал — Возможное решение
Нужные люди не увидели материал — Изменить канал или способ доставки
Увидели, но не открыли — Проверить вход, обещание и заголовок
Читают, но не понимают различие — Перестроить объяснение и примеры
Понимают, но не делают следующий шаг — Проверить цену шага, условия и доверие
Приходят не те люди — Уточнить ситуацию и критерии в сообщении
Возвращаются к серии — Продолжить территорию и связать материалы
Если при любом результате команда ничего не изменит, показатель не нужен для текущего решения. Его можно сохранить как справочную статистику, но не делать центром отчёта.
  1. У каждого сигнала свой срок
Быстрая реакция и долгий эффект живут в разном времени.
Открытия рассылки видны почти сразу. Содержательные ответы могут приходить несколько дней. Возврат к серии обнаруживается через недели. Изменение профессиональной практики иногда можно увидеть только после следующей рабочей задачи.
Если открыть статистику через час и вынести окончательный вердикт, преимущество всегда получат быстрые, эмоциональные и легко измеримые реакции. Более сложная работа материала окажется «невидимой» просто потому, что ей не дали проявиться.
До публикации укажите:
• когда проверяется доставка;
• когда можно оценивать внимание и реакцию;
• через какой срок ожидается следующий шаг;
• где и когда можно заметить долгий эффект.
Это не запрещает оперативно исправить сломанную ссылку или неясный заголовок. Оно запрещает путать ранний сигнал с окончательным результатом.
Когда метрика начинает портить работу
Люди адаптируются к тому, за что их оценивают.
Если редакция отвечает только за количество публикаций, она увеличивает выпуск.
Если только за охват, выбирает максимально широкие темы.
Если только за реакции, усиливает конфликт и быстрые эмоции.
Если только за переходы, обещает больше, чем материал способен дать.
Показатель перестаёт быть следом результата и становится инструкцией для поведения. Поэтому нужно проверять:
Какое нежелательное действие станет выгодным, если мы сделаем эту цифру главной?
Баланс не означает длинную панель из двадцати KPI. Иногда достаточно добавить ограничение качества: не просто регистрации, а регистрации подходящих участников; не просто скорость выпуска, а выпуск без критических исправлений; не просто охват, а охват нужной группы.
Чему здесь учит Moneyball
В разборе фильма «Человек, который изменил всё» привычные скаутские оценки звучат убедительно: сильный игрок, красивый замах, уверенный вид. Но Билли Бин и Питер Бренд ищут показатели, связанные с тем, что действительно помогает команде выигрывать в её условиях.
Смысл не в том, что цифра всегда умнее профессионала. Смысл в смене вопроса: какие наблюдаемые действия создают нужный результат, а какие критерии мы повторяем по привычке?
Оксана переносит этот вопрос в редакцию: как выбираются темы, сотрудники и форматы? Что считается результатом? Почему именно это?
Такая проверка нужна и одной публикации. Лайки могут быть привычным редакционным эквивалентом «красивого замаха»: заметны, понятны, легко обсуждаются. Но связь с задачей ещё нужно доказать.
Не путайте показатель результата с цифрой внутри материала
В редакционных стандартах Sdelano.media для кейсов использовался блок «Три цифры». Его задача — помочь автору выбрать говорящие данные о масштабе, производстве или результате проекта и дать им контекст.
Это полезный стандарт доказательства внутри материала. Но сами эти три цифры не являются метриками успеха публикации. Они помогают читателю понять кейс.
Различие важно:
• данные в материале поддерживают утверждение;
• показатели материала помогают оценить выполненную им работу.
Одна и та же цифра не обязана решать обе задачи.
Метод: карточка измерения
Для одного материала заполните:
Ожидаемое изменение:
Главный показатель:
Почему он связан с изменением:
Поясняющий сигнал 1:
Поясняющий сигнал 2:
Знаменатель и база сравнения:
Что показатель не сможет доказать:
Решение при высоком значении:
Решение при низком значении:
Когда смотрим:
Если строка «Почему он связан» не заполняется без натяжки, вернитесь к выбору показателя.
Практика
Возьмите три материала с разными задачами:
  1. один должен помочь человеку разобраться;
  2. второй — привести к следующему действию;
  3. третий — вернуть человека к серии.
Для каждого:
• сформулируйте ожидаемое изменение;
• выберите один главный показатель;
• добавьте один количественный и один качественный поясняющий сигнал;
• назовите знаменатель;
• определите срок наблюдения;
• запишите, какое решение примете при трёх вариантах результата;
• проверьте, какое нежелательное поведение может поощрить выбранная цифра.
Затем удалите из отчёта показатели, которые не помогают ни одному решению. Их можно оставить в архиве, но команда не обязана обсуждать всё, что способна выгрузить платформа.
Как понять, что гексагон пройден
• Показатель выбран после задачи, а не вместо неё.
• Производство отделено от доставки, внимания, реакции и эффекта.
• Есть один главный показатель и не больше двух поясняющих.
• Абсолютное число рассматривается вместе с долей и масштабом.
• Сравниваются сопоставимые материалы и периоды.
• Качественные сигналы не отброшены, но и не выданы за мнение всех.
• Понятно, что показатель не способен доказать.
• Для высокого, низкого и неизменного результата названы решения.
• Проверено, какое поведение поощряет метрика.
• В отчёте осталось только то, что нужно для следующего действия.
Что забрать с собой
Полезная метрика не украшает отчёт и не выносит приговор материалу. Она оставляет след ожидаемого изменения и помогает понять, какой следующий шаг стоит сделать.
Куда дальше
• M03 Что цифры на самом деле доказывают
• M04 Что изменить после публикации
• M01 Что должна изменить эта публикация
• DX01 Где на самом деле сломалось