Способы оценки обучения персонала

Расчет эффективности обучения персонала: от опросников к ROI

«Предоставляем бесплатное обучение», — когда-то возможности написать так в вакансии было достаточно, чтобы убедить руководство поддержать запуск корпоративного обучения. Теперь вопросов все больше, и главный из них: «Сколько обучение сотрудников помогает заработать?». Только в США в 2018 году общие расходы на обучение составили 87,6 млрд долларов. Справедливо, что руководители компаний хотят знать, как окупаются инвестиции.

Из этой статьи вы узнаете о методологии расчёта рентабельности корпоративного обучения (ROI) и получите инструкцию, как это сделать на практике. Но сперва пройдите короткий тест и узнайте, готова ли ваша компания начать измерять ROI обучения персонала.

Что такое ROI обучения и зачем его измерять

ROI — это показатель возврата вложенных средств и индикатор эффективности инвестиций. Суперсила коэффициента ROI в том, что он знаком финансистам и вызывает доверие у руководства компании.

Смысл расчёта ROI заключается в переводе затрат на обучение и выгод от него в одинаковые единицы измерения — рубли, доллары или другую валюту. Это здорово, потому что тогда возможно провести прямое сравнение и сделать однозначный вывод об эффективности обучения для бизнеса.

Формула расчёта ROI выглядит так:

Положительный коэффициент означает что вы отработали в плюс, отрицательный — обучение идёт в убыток.

Пример 1. Компания «Бета» вложила в обучение сотрудников 650 000 рублей. Благодаря этому удалось повысить продажи и заработать на 1 750 000 рублей больше.

ROI = (1 750 000 — 650 000)/650 000*100 = 169%

Получается, на каждый вложенный рубль компания получила 2 рубля 69 копеек.

Пример 2. Компания «Гамма» потратила на обучение 250 000 рублей. Обученные сотрудники принесли компании дополнительные 75 000 рублей.

ROI = (75 000 — 250 000)/250 000*100 = -70%

В этом примере ROI отрицательный. Это означает, что получение дополнительных 75 тысяч прибыли не стоило ресурсов, вложенных в программу. Овчинка выделки не стоила.

Пока всё просто, в чём подвох?

Перемножать и делить числа легко, когда речь идёт об абстрактных примерах. Но на практике узнать, сколько удалось заработать благодаря изучению какого-то курса, — сложно.

Здесь стоит напомнить, что сама по себе формула расчёта ROI — не магический шар, который отвечает на любые вопросы. Допустим, британские учёные сообщили, что ROI последнего курса составил 7%. Какой из этого следует вывод?

Это хорошо или плохо?

Что помешало добиться большего ROI?

Как можно повысить ROI?

Точно ли результат получен благодаря обучению сотрудников, а не новой рекламной кампании?

Без дополнительных данных коэффициент ROI лишь демонстрирует экономический эффект. Что само по себе уже неплохо, но для правильного толкования результатов требуется комплексный подход к оценке эффективности обучения. Давайте рассмотрим этот подход в деталях.

Методология оценки эффективности обучения: модели Киркпатрика и Филлипса

Самая известная модель для измерения эффективности обучения — четырехуровневая модель Дональда Киркпатрика. Основная претензия в адрес Киркпатрика заключалась в его убеждении, что измерять результаты обучения в деньгах невозможно или не имеет смысла. Вот почему позднее Джек Филлипс создал свою 5-уровневую модель ROI.

Сравнение моделей Киркпатрика и Филлипса

Филлипс доработал модель Киркптарика, добавив в неё Уровень 0 (Затраты) и Уровень 5 (ROI) — те самые конкретные цифры, которые хочет видеть заказчик. Кроме того, Филлипс предложил способы изоляции результатов обучения от влияния других факторов, например, маркетинга. Это серьёзно повышает достоверность оценки.

«Все решения работают в комплексе, но важно знать, в какой степени каждое из них повлияло на конечный результат. Если вы не знаете, что именно привело к результату, вы не можете управлять ситуацией. Уж поверьте, маркетологи сумеют составить отчёт об отдаче от рекламы, промо-акций и даже эффекте от смены ценовой политики. В этом плане маркетинг сильно обгоняет обучение. Если мы будем бездействовать, как предлагает Киркпатрик, мы потеряем доверие и поддержку».

Response to LinkedIn Post: Kirkpatricks vs. Phillips

Как измерить ROI обучения

Измерение ROI по методике Филлипса состоит из четырёх этапов: планирование оценки, сбор данных, анализ и подготовка отчёта.

Последовательность действий при измерении ROI. Источник: ROI Institute

1. Определяем цели обучения

Чётко поставленные и зафиксированные цели гарантируют, что в процессе сбора данных вы будете задавать правильные вопросы и ничего не упустите. Патти Филлипс в своей книге «The Bottomline on ROI» рекомендует прорабатывать цели сверху вниз, начиная с желаемого экономического результата и заканчивая реакцией учащихся на учебный курс.

За 12 месяцев сократить объём брака на 20%

Рейтинг курса не ниже 9 баллов из 10 возможных.

Патти Филлипс рекомендует проводить исследования первого уровня (Реакция) для 90-100% учебных программ, а вот измерение ROI необходимо лишь в 5-10% случаев.

2. Разрабатываем план

На этом шаге создаём и утверждаем три документа: план сбора данных, план по анализу данных и план по расчёту ROI — по этим документам вы будете контролировать ход проекта и оценивать свои успехи.

Что важно прописать в плане:

способы их достижения;

инструменты (например, СДО);

ответственных за выполнение каждого пункта.

На сайте ROI Institute можно бесплатно скачать шаблон плана проекта расчёта эффективности учебной программы и другие полезные ресурсы.

Если вы хорошо потрудитесь, то получите проработанную пошаговую тактику реализации проекта — её необходимо согласовать с клиентом или руководством. Так вы ещё раз убедитесь, что ваши ожидания совпадают, и договоритесь о критериях признания каждого этапа выполненным.

3. Собираем данные во время обучения и после него

На этом шаге работаем по классической методике Киркпатрика. Во время обучения оцениваем реакцию учащихся на изученные материалы и то, как новые знания усвоились. После завершения обучения отслеживаем, как полученные знания применяются на практике и какой результат это приносит.

Для этого можно использовать:

• листы реагирования
• опросы
• интервью
• фокус-группы
• тестирование
• решение кейсов
• контрольные листы
• карты и фотографии рабочего дня

Пример вопросов из листа реагирования (Уровень 1)

Пример цели
Уровень 5: ROI
Уровень 4: Результат
Уровень 3: Поведение	Операторы линии в состоянии своевременно распознать потенциальный брак изделия. Применяют систему «андон» на практике в случае необходимости. В случае обнаружения серьёзных проблем, в полном объёме соблюдают четыёхшаговую инструкцию.
Уровень 2: Научение	Операторы демонстрируют отличное знание конструкции изделия, могут отличить брак от нормы. Знают, что такое система «андон», понимают её цель и то, как именно она работает.
Уровень 1: Реакция

Категорически не согласен	Абсолютно согласен
1. Тема курса была актуальна	1	2	3	4	5
2. Преподаватель хорошо разбирается в предмете и понятно объясняет	1	2	3	4	5
3. Я смогу применить полученные знания в повседневной работе	1	2	3	4	5

Пример измерения изменений в поведении (Уровень 4)

4. Изолируем эффект от обучения

На конечный результат бизнеса влияет огромное число факторов: от ценовой политики до харизмы отдельных сотрудников. Изоляция — критически важный шаг, который помогает отделить заслуги обучения от влияния других факторов и обеспечивает достоверность всей методики.

Наиболее доступные техники изоляции:

Контрольная группа: вы запускаете пилотное обучение на отдельных группах участников и сравниваете результат с показателями контрольной группы, которая не участвует в программе.

Оценка участников: вы предлагаете самим участникам оценить, в какой степени обучение повлияло на их результаты.

Оценка руководителей подразделений или супервайзеров: вы просите руководителей оценить влияние обучения их команды на конечный результат группы.

5. Переводим результаты в деньги

На этом шаге присваиваем ценность в денежном эквиваленте каждому виду результатов, полученных после обучения. Так вы сможете сравнить их с затратами. Точные данные — выработка, качество и время, — как правило, можно без проблем конвертировать в деньги. Например:

дополнительные продажи → прибыль от этих продаж;

экономия времени сотрудника → рассчитываем стоимость сэкономленного времени исходя из среднего размера зарплаты (стоимость часа работы умножаем на количество сэкономленных часов сотрудника);

снижение времени простоя оборудования → оцениваем по затратам прошлых лет;

снижение текучки персонала → средства, сэкономленные на подборе персонала и адаптации;

повышение качества → средства, сэкономленные благодаря снижению процента брака.

6. Оцениваем затраты на программу

Подсчитываем все прямые и сопутствующие расходы, связанные с проведением обучения. Сюда входят зарплаты преподавателей, расходы на СДО, траты на пиар учебной программы, покупка оборудования и т.д. Не забудьте включить и расходы на проведение оценки эффективности программы.

7. Рассчитываем ROI по формуле

Как правило, для краткосрочных программ ROI рассчитывается за год. Но в отдельных случаях, когда вы реализуете масштабную программу (например, запускаете корпоративный университет), достижение максимального эффекта может занять несколько лет. Это стоит учитывать.

8. Определяем нематериальные выгоды

В большинстве случаев учебные программы помимо финансовых выгод приносят и нематериальные выгоды. Например, улучшение имиджа организации, рост сплочённости коллектива, повышение лояльности сотрудников компании. Проблема в том, что эти результаты субъективны.

Попытка конвертировать, скажем, командный дух в деньги для использования в расчёте ROI может серьёзно навредить достоверности и убедительности итоговых результатов. Лучше получить меньший коэффициент ROI с сильным отчётом о нематериальных выгодах, чем продемонстрировать высокий ROI, рискуя подорвать доверие ко всей оценке программы.

Если сомневаетесь, нужно конвертировать показатель или нет, воспользуйтесь подсказкой от ROI Institute:

9. Готовим отчёт и представляем результат

Отчёт о результатах — последний по списку, но не по важности шаг в оценке учебной программы. Подготовка отчёта и его презентация требуют тщательного планирования, ведь на кону дальнейшая судьба проекта. На этом этапе у вас две основные задачи:

А) Подготовить отчёт для разных целевых аудиторий. Разной аудитории нужна разная информация, поэтому заранее продумайте, какие отчёты потребуются. Хорошая идея — готовить сразу две версии каждого отчёта: краткую и подробную. Так вы облегчите понимание результатов, за что вам точно будут признательны.

Заказчики, высшее руководство

Полный отчёт о проведении оценки программы обучения

Источник

Как и зачем оценивать эффективность обучения персонала

Как часто бывает: заказала компания тренинг, сотрудники его дружно прослушали, заполнили анкеты и на этом все. Тренер получил свои деньги, а компания — ожидает новые результаты в бизнесе. Но при этом руководство компании не знает уровень навыков сотрудников до обучения, чему они научились на тренинге, и во что компания вложила деньги в итоге. Такая себе метафизика в кадрах.

Современные инструменты онлайн-образования позволяют увидеть полную картину обучения специалистов и отследить его эффективность на любом этапе. Что же такое эффективность обучения персонала, в чем она измеряется, и как ее можно не только отследить, но и повысить — читайте в материале ниже.

Что такое эффективность корпоративного обучения и в чем она измеряется

Эффективность обучения — это четкий показатель, который говорит, насколько обучение персонала помогло компании достичь поставленных целей.

Успешность обучения финансовых специалистов часто измеряется увеличением ликвидности и рентабельности бизнеса либо же минимизацией штрафов. Но для каждого специалиста, в зависимости от программы обучения и специфики его работы, будут свои показатели.

• Если брать управленцев — от повышения их квалификации ожидается оптимизация бизнес-процессов, выход компании на новые рынки, пересмотр стратегии.
• Финансовые аналитики после обучения должны уметь оценивать риски и увеличивать прибыльность деятельности компании на рынке.
• После изучения финансового менеджмента сотрудники должны уметь диагностировать финансовое состояние компании и быстро принимать эффективные антикризисные решения.

Важно! Если во всех этих случаях увеличилась прибыль и сократились издержки компании — обучение можно считать эффективным.

Екатерина Ивлева, СЕО Финансовой академии Актив:

Прежде чем отправлять сотрудников корпоративного клиента на обучение, мы спрашиваем о его целях и ожиданиях. Например, им нужны специалисты, способные просчитать риски вывода новой продукции на рынок, оптимизировать производство или увеличить прибыль на 20%. Уже от этой задачи выстраивается весь дальнейший процесс обучения.
Вначале мы тестируем сотрудников, чтобы понять, каких им навыков не хватает для реализации этой задачи. Потом составляем программу обучения, обучаем и через месяц-два по его окончанию проводим повторное тестирование. Смотрим, как сотрудники применяют новые знания на практике и насколько их обучение помогло компании достичь поставленной цели. Без тестирования это все отследить было бы невозможно.

Что показывает тестирование и когда оно проводится

В нашей академии любой курс, очный или дистанционный, начинается и завершается тестированием навыков на digital-платформе Finassessment. Так мы отслеживаем динамику обучения и понимаем, насколько оно было эффективным.

На очном обучении тестирование проводится дважды: в начале и в конце обучения. А на дистанционных курсах специалисты сдают тесты намного чаще, что и делает его более результативным.

Входящее тестирование — проводится однократно перед обучением. Показывает изначальный уровень навыков специалистов, с которыми они пришли на курс. По результатам тестов пишется кастомизированная программа обучения, а сотрудников делят на разные группы по уровню подготовки для прицельного обучения.

Вот так выглядит результат тестирования сотрудника по теме управленческого учета

• Промежуточные тесты на курсе — их сдают во время обучения после каждого модуля курса. Тест показывает, насколько хорошо студент усвоил пройденную тему. И не пускает на следующий модуль, если результаты проверки ниже 80 баллов. Проходить промежуточные тесты можно сколько угодно, пока открыт доступ к курсу.
• Итоговое тестирование по курсу — общий контроль по всему курсу, по-сути, итоговый экзамен. Он приближен к официальному экзамену по программе повышения квалификации, что позволяет неплохо потренироваться перед его сдачей.
• Исходящее тестирование — заключительный срез знаний по всей программе корпоративного обучения. Показывает прогресс в обучении, чему конкретно научились сотрудники, насколько повысился их уровень навыков по сравнению со входящим тестированием.
• Контрольное тестирование — проводится через 1-2 месяца после исходящего тестирования. Показывает, что именно специалисты запомнили и успели применить на практике. Если показатели сохранились — можно считать, что обучение прошло эффективно. А если “скачут” — нужно разбираться в причинах.

Какие отчеты говорят об эффективности обучения

Все время обучения HR-специалист или руководитель, курирующий обучение сотрудников в компании, регулярно получает различные отчеты, которые формируются по результатам тестирования. Например, каждую неделю в его личном кабинете на платформе Finassessment автоматически формируется отчет об успеваемости каждого сотрудника. В нем видно, как часто специалист заходил на платформу, какие вебинары смотрел, что скачивал и просматривал, на сколько процентов сдал промежуточное тестирование и сколько раз его проходил.

А еще в том же кабинете можно самостоятельно сформировать и скачать такие отчеты:

• сводный отчет по группе — показывает результаты одного теста по всей группе: сколько баллов набрали по темам в разрезе теории и практики, сколько времени потратили на тест и прочее
• прирост навыков — показывает, насколько успешно группа усвоила отдельную тему курса, какие навыки, кто наработал, а какие еще надо каждому из них подтянуть
• сравнительный отчет — показывает прогресс всей группы до и после обучения, насколько эффективной была программа курса, кто хорошо учился, а кто и вовсе не брался за уроки.

Слева — сравнительный отчет группы, а справа — отчет по приросту навыков

Каждый из этих отчетов показывает, какие темы стоит подтянуть отдельным сотрудникам, и насколько эффективно проходит обучение. С такими отчетами руководитель может вовремя заменить незаинтересованных в обучении специалистов на других, более мотивированных, и сэкономить деньги компании.

Как тестирование повышает эффективность обучения

Эффективность обучения во многом зависит от профессионализма преподавателей, правильной методологии обучения, технической поддержки и контроля со стороны методического отдела. Все это есть в нашей академии. Но если у самих сотрудников нет мотивации учиться — система, даже самая идеальная, может не сработать.

Но тестирование помогает справиться и с этой задачей. Как показывает практика, когда сотрудники знают, что на курсах будет регулярная проверка знаний, они серьезнее относятся к обучению. Больше выкладываются, чтобы показать результат руководству или опередить коллег. Но это далеко не все плюсы инструмента.

Тестирование также помогает:

• экономить деньги компании — на основе результатов тестов формируется программа обучения, в которой нет лишних тем и теории, а значит компания платит только за те знания, которые нужны ее специалистам для решения бизнес-задач
• обучать только мотивированных и не тратить деньги на развитие тех, кому это не нужно или не интересно
• объективно оценить эффект от обучения — система тестирования полностью автоматизирована, вопросы в тестах регулярно обновляются, поэтому списать сотрудники не смогут ни из интернета, ни у друг друга
• видеть всю историю обучения специалистов — после прохождения курсов повышения квалификации, сотрудники получают сертификаты от академии, защищенные блокчейн-технологией. На документе есть QR-код, который хранит всю историю обучения специалиста, а также результаты тестирований (буквально каждый шаг на модулях и тестах). Получить такую информацию можно просто, если ввести QR-код с сертификата сотрудника на странице проверки диплома.

Анализ результатов тестирования позволяет еще во время курсов повлиять на успешность обучения специалистов, а после них — провести эффективные кадровые ротации, разработать траекторию карьеры для ценных сотрудников и решить, в каких направлениях развивать персонал дальше.

Источник

Целевая аудитория	Подробный отчёт	Краткий отчёт