Как измерить эффективность обучения: методика и разбор 8 платформ

Я решил разобраться, как на самом деле измеряют эффективность обучения — за пределами отчёта «курс прошли 80% сотрудников». Выяснилось, что большинство LMS хорошо показывает учебную активность, но бизнес-эффект появляется только после соединения этих данных с кадровыми, производственными или коммерческими показателями. Ниже — методика оценки, практические формулы и разбор восьми платформ с учётом того, какие данные они действительно дают.

Методика оценки эффективности

Метрики обучения полезно разделять на три уровня. Первый показывает, состоялось ли обучение: сотрудник получил назначение, начал курс и завершил его в срок. Второй отвечает, изменились ли знания и поведение: вырос результат теста, уменьшилось число ошибок, руководитель подтвердил применение навыка. Третий связывает обучение с результатом подразделения: скоростью адаптации, продажами, браком, безопасностью или текучестью.

• Скорость выхода новичка на норму — метрика высокого веса, если норма заранее определена одинаково для всех сотрудников одной роли.
• Завершение в срок — важная операционная метрика, особенно для обязательных программ, но сама по себе не доказывает пользу курса.
• Результаты тестов и переаттестаций — показатель усвоения знаний, который нужно отделять от запоминания правильных ответов.
• Перенос навыка в работу — доля обученных сотрудников, которые начали выполнять нужное действие по установленному стандарту.
• Изменение бизнес-показателя — самый сильный уровень доказательства, если эффект сравнивают с подходящей контрольной группой.

Главная ошибка — складывать эти уровни в одну цифру. Высокая доходимость не компенсирует отсутствие изменений в работе, а рост продаж не всегда вызван курсом. Хорошая система аналитики сохраняет цепочку: назначение → завершение → проверка знаний → наблюдаемое действие → рабочий результат.

Четыре метрики, которые можно посчитать одинаково в любой компании

Срок выхода на продуктивность лучше считать как медианное число календарных дней от даты найма до первого устойчивого выполнения нормы. Слово «устойчивого» критично: один удачный день не означает, что новичок адаптировался. Для продаж это могут быть три недели подряд не ниже плана, для производства — несколько смен без критических ошибок.

Завершение в срок рассчитывается как число сотрудников, закончивших программу до дедлайна, делённое на число сотрудников, которым она была назначена. Людей в отпуске, на больничном или уволенных до дедлайна нужно учитывать по заранее утверждённому правилу, иначе подразделения окажутся несопоставимыми.

Перенос обучения — доля сотрудников, у которых руководитель или аудитор подтвердил нужное поведение через 30–60 дней после курса. Например, не «сдал тест по работе с жалобами», а «использует обязательные этапы разговора в реальных обращениях».

Добавочный эффект можно оценить по формуле разницы разниц: изменение показателя у обученной группы минус изменение того же показателя у сопоставимой необученной группы. Такой расчёт отсеивает часть сезонности и общего роста рынка.

Метрики-обманки, которые нельзя использовать в одиночку

Три показателя часто выглядят убедительно, но без контекста легко вводят руководство в заблуждение.

Часы в системе. Долгое прохождение может означать вдумчивую работу, непонятный материал, техническую проблему или просто открытую вкладку. Время полезно как диагностический сигнал: слишком короткое прохождение помогает найти формальное пролистывание, слишком длинное — сложные или сломанные фрагменты курса.

Число входов. Логины хорошо измеряют частоту контакта с платформой и эффективность напоминаний, но не усвоение знаний. Рост входов без завершений и результатов тестов скорее говорит о трении в учебном пути.

Удовлетворённость курсом. Опрос после обучения нужен для оценки понятности, темпа и качества материалов. Он не заменяет проверку навыка: полезный и требовательный курс может получить более низкую оценку, чем приятная, но поверхностная лекция.

Минимальный набор данных для честного отчёта

Чтобы связать обучение с результатом, не нужен большой дата-офис. Нужна единая строка сотрудника и стабильный идентификатор, по которому соединяются системы. Минимальный набор состоит из даты найма, должности и подразделения, назначений и дедлайнов, фактических дат завершения, результатов попыток, кадровых событий и выбранного рабочего показателя по периодам.

Для онбординга таким показателем может быть дата первого устойчивого выполнения нормы. Для контакт-центра — доля повторных обращений или оценка качества разговора. Для производства — брак на тысячу операций, простои или нарушения. Для розницы — конверсия, средний чек или выполнение стандарта обслуживания. Если LMS нельзя связать с этими данными по сотруднику и периоду, она показывает учебный процесс, но не эффективность обучения.

Какие данные дают платформы и чего от них не ждать

Ниже не рейтинг продуктов, а проверка границ аналитики. Число отчётов само по себе мало значит: важнее, можно ли выгрузить данные, соединить их с внешними показателями и воспроизвести расчёт через месяц.

Система	Что доступно для анализа	Ключевое ограничение
Добыто	Кадровые документы, события и интеграция с 1С:ЗУП или другими учётными системами	Это КЭДО, а не LMS; учебные статусы и тесты должны приходить из отдельной системы обучения
iSpring LMS	Прогресс, результаты тестов, время обучения, отчёты по сотрудникам и выгрузка в таблицы	Связь с продажами, браком или текучестью требует внешних данных и настройки обмена
Mirapolis LMS	Около 40 готовых отчётов, отчётность по программам и возможность индивидуальной настройки	Польза зависит от качества модели данных и технического задания, а не от количества отчётов
Websoft HCM	Обучение, адаптация, компетенции, оценка, KPI и OKR в более широком HR-контуре	Для полноценного эффекта нужно внедрять процессы и справочники, а не только включить учебный модуль
Teachbase	Отчёты по платформе, курсам, мероприятиям и пользователям, результаты и выгрузки	Сквозная связь с рабочими KPI требует заранее спроектированной аналитики и внешних источников
Эквио	40+ готовых дашбордов, подключение LMS, HR-систем, CRM, ERP и таблиц	Нужно проверить, какие интеграции и дашборды входят в конкретную конфигурацию проекта
Motivity	Завершение, тестирование, длительность прохождения, NPS, а также отдельный контур целей и KPI	Наличие показателей в одной платформе ещё не доказывает причинную связь между курсом и результатом
Kampus	Учебные треки, индивидуальные планы развития, прогресс, оценка и практические задания	Для оценки бизнес-эффекта нужны данные рабочих систем и единые правила измерения результата

Добыто в этом списке занимает отдельную роль. Сервис публично позиционируется как кадровый электронный документооборот и поддерживает интеграцию с 1С:ЗУП и открытый API. Поэтому корректный сценарий — использовать его как часть кадрового контура, а не называть учебной платформой. Например, LMS передаёт дату завершения онбординга, кадровая система — дату найма и увольнения, CRM — результаты продаж. Только после соединения этих трёх источников можно проверять влияние обучения на адаптацию и удержание.

Как проверить аналитику платформы до покупки

На демонстрации попросите показать не красивый дашборд, а путь одной цифры до исходной записи. Выберите пять тестовых сотрудников, назначьте им программу, задайте разные дедлайны, сделайте несколько попыток теста и выгрузите результат. В отчёте должны однозначно различаться назначение, начало, завершение, просрочка, лучший результат и последняя попытка.

Затем проверьте пять технических вопросов:

• есть ли стабильный идентификатор сотрудника для соединения с 1С, CRM или ERP;
• можно ли выгружать историю попыток, а не только текущий итог;
• сохраняются ли даты кадровых переводов и изменения подразделения;
• как система обрабатывает повторное назначение одного курса;
• доступны ли данные через API или регулярную автоматическую выгрузку.

Если вендор показывает только агрегированную диаграмму, но не может выгрузить строки, аналитика останется презентационной. Для проверки эффекта нужны воспроизводимые данные: другой аналитик должен получить тот же результат по тем же правилам.

Почему компании измеряют не то

Метрики активности живучи не потому, что специалисты не понимают их слабость. Они удобны: часы, входы и число завершений почти всегда растут после запуска LMS. Эти показатели легко показать на слайде, и они редко вызывают неприятные вопросы.

Скорость выхода новичка на норму или снижение брака могут не измениться. Тогда придётся разбирать программу, работу наставников, условия на местах и качество самой нормы. Между метрикой, которая всегда выглядит позитивно, и метрикой, которая иногда показывает провал, организация естественным образом выбирает первую.

Вторая причина техническая. Активность хранится внутри LMS, а честный результат — в кадровой, производственной или коммерческой системе. Когда нет автоматического обмена, сотрудник раз в месяц вручную объединяет таблицы. Достаточно смены формата столбца или увольнения ответственного, чтобы расчёт перестал воспроизводиться.

Как считать эффект без сложной статистики

Сравнение «до и после» подходит только для первичной диагностики. На показатель одновременно влияют сезон, цены, новый продукт, смена руководителя и состав команды. Приписывать всю разницу курсу нельзя.

Практичный вариант — запускать обучение волнами. Сопоставимые подразделения или сотрудники делятся на две группы: первая проходит программу сейчас, вторая — позже. Для обеих групп фиксируют одинаковый период до старта и одинаковый период после. Затем считают изменение показателя внутри каждой группы и вычитают одно изменение из другого.

Пример: до обучения обучаемая группа закрывала 18% обращений с первого контакта, после — 25%, рост составил 7 процентных пунктов. Контрольная группа за тот же период выросла с 19% до 22%, то есть на 3 пункта. Оценка добавочного эффекта обучения — 4 процентных пункта, а не все семь.

Группы должны быть похожи по роли, опыту, региону и исходному уровню результата. Не стоит сравнивать сильнейший филиал с новичками или высокий сезон с низким. При малом числе сотрудников вывод лучше формулировать осторожно: не «курс доказал рост», а «после пилота получен сигнал, который нужно проверить на следующей волне».

Как перевести обучение в деньги

Доходимость и баллы нужны команде обучения, но руководству проще принимать решение по стоимости эффекта. Для онбординга можно посчитать число сэкономленных человеко-дней: разницу в сроке выхода на норму умножить на число новичков. Затем человеко-дни переводятся в стоимость рабочего времени или в дополнительный выпуск продукции.

Для программы, снижающей ошибки, эффект равен количеству предотвращённых ошибок, умноженному на среднюю стоимость одной ошибки. В неё включают переделку, компенсации, потерю материалов и время руководителя. Для продаж считают добавочную маржу, а не всю выручку.

Формула возврата инвестиций выглядит так: ROI = (добавочная выгода − полная стоимость обучения) / полная стоимость обучения × 100%. В полную стоимость входят лицензия LMS, разработка курса, работа тренеров и наставников, часы сотрудников, интеграции и администрирование. Если учесть только цену курса, ROI будет искусственно завышен.

Что критично для операционного руководителя

Начинать нужно не с каталога отчётов, а с одного управленческого вопроса. Например: «сокращает ли программа срок выхода продавца на план», «уменьшает ли курс число повторных ремонтов» или «снижает ли аттестация нарушения техники безопасности». Для каждого вопроса выбирают один основной показатель, фиксируют базовый период и определяют, где лежат исходные данные.

До запуска договоритесь о норме, дедлайне, правилах исключения и периоде наблюдения. После запуска смотрите цепочку целиком: кто получил назначение, кто завершил, кто усвоил материал, кто применил навык и у кого изменился рабочий результат. Если цепочка обрывается, понятно, где искать проблему.

Выбор платформы зависит не от максимального числа графиков. Для стандартной учебной отчётности достаточно LMS с детальными выгрузками. Для единого контура обучения, компетенций и результативности полезнее HCM. КЭДО решает другую задачу и может дать кадровые события для объединённой аналитики, но не заменяет LMS. Главный критерий один: сможете ли вы через полгода повторить расчёт и объяснить, какая часть результата действительно связана с обучением.