Назад

5 методов и 5 шагов оценки эффективности обучения персонала

Apr 1, 2021 2:03:15 AM / Автор Yva.ai

В 2016 году HR-специалисты компании MW-Light1 сумели снизить стоимость обучения сотрудников в 21 раз. Как им это удалось? 

 

Исходно расходы компании на тренинги составляли около 4 млн р. в квартал. Внушительная сумма на обучение в MW-Light набегала из-за того, что нужно было регулярно обучать региональных менеджеров работе с обновлённым ассортиментом. 

 

Обучение одного менеджера по продажам обходилось в 3800 рублей в месяц. HR-менеджеры MW-Light предположили, что стоимость можно снизить, провели оценку эффективности обучения и кое-что нашли.

 

Обучение для региональных сотрудников проводилось в формате выездных тренингов, что довольно дорого. Но оказалось, что многих сотрудников устроило бы дистанционное обучение. А некоторые даже обрадуются такой возможности, потому что тогда можно самим выбирать, когда учиться.

 

Выбор формата оказался решающим для MW-Light в решении по снижению расходов на обучение персонала. «Теперь мы не тратим деньги на командировочные, авиабилеты, номер в отеле для тренера. Когда рынок выходит новая линейка продуктов, маркетинг собирает по ней презентации, а я на их основе создаю курсы, которые сотрудники проходят в свободном режиме. В месяц это обходится компании 179 рублей на менеджера», – рассказывает Лана Виноградова, руководитель проекта дистанционного обучения MW-Light. 

 

По данным исследования рекрутингового агентства Antal Russia в период коронакризиса 43 % российских компаний сократили инвестирование в корпоративное обучение. Однако стратегическая значимость этого направления не теряет своей остроты2. Значит ли это, что опыт MW-Light компании применим в любой организации?

 

В новых реалиях на первый план выходит грамотная оценка эффективности обучения персонала – функция, которая определяет, что именно можно улучшить в текущей системе обучения сотрудников, чтобы она работала лучше, а стоила дешевле.

 

С чего HR-у начинать оценку качества обучения? Какие существуют методы оценки эффективности обучения персонала? В чем их преимущества и ограничения? Разбираемся с вопросами цены / качества обучения сотрудников – в новом материале Yva.ai.

 

Оценка эффективности обучения de facto

 

Как показывает практика, часто оценка обучения персонала сводится к формальному заполнению анкет по окончании тренинга. Слушатели делятся реакцией и выражают благодарность наставнику. Более сложный и глубокий анализ не проводится, потому что HR-менеджеры или руководители:

 

  • недооценивают его важность и отдают предпочтение другим задачам,
  • не знают, как его организовать,
  • не получают соответствующих требований от руководства,
  • опасаются увеличить себе объём работы, взвалив дополнительные обязанности.

 

Однако, чтобы измерить эффективность инвестиций в обучение персонала, поверхностной оценки недостаточно. Тем более этого не хватит, если мы хотим понять, что полезно улучшить в действующей системе обучения сотрудников. 

 

Сегодня существует много способов оценить эффективность обучения персонала – начиная с классической модели Киркпатрика и заканчивая современными комбинированными системами и методами.

 

Рассмотрим 5 наиболее актуальных способов оценки обучения персонала, встречающихся в современной практике HR-ов и попробуем разобраться, в чём их отличия, возможности и ограничения.

 

Оценочная модель Дональда Киркпатрика 

 

Наиболее известный подход к оценке эффективности обучения предложил американский исследователь Дональд Киркпатрик – автор нескольких бестселлеров, президент профессионального объединения тренеров и консультантов ARSD (American Research and Development Society)3

 

Д. Киркпатрик называет оценку неотъемлемой частью цикла проведения обучения – наряду с постановкой целей, выбором участников, формированием расписания и другими этапами. По его мнению, оценка позволяет понять, насколько программа соответствует потребностям обучающихся сотрудников.

 

С помощью оценки можно определить, подходит ли выбранный преподаватель группе учащихся: применяет ли он эффективные методы передачи знаний, способствуют ли его инструменты обучения поддержанию интереса участников, улучшению коммуникации и решению непосредственных задач бизнеса.

 

Ставшая классикой, модель Киркпатрика раскрывает степень удовлетворённости сотрудников обучением. Она даёт понять, устраивает ли слушателей расписание, насколько оптимально распределена нагрузка, является ли программа обучения сбалансированной. И, самое главное, – отвечает на вопрос, что нужно предпринять, чтобы процесс обучения проходил ещё более эффективно4.

 

Модель Киркпатрик оценивает обучение (тренинг) по четырёхуровневому алгоритму, где важна каждая ступень, которая оказывает влияние на следующий этап.

 

Модель оценки эффективности обучения по Дональду Киркпатрику

 

«На каждом следующем уровне анализ становится всё более трудозатратным, но при этом позволяет получить ценную информацию. Ни один из шагов не может быть пропущен по той причине, что аналитик считает другой этап более важным»5, 0 поясняет Киркпатрик.

 

Шаг #1 Реакция (Reaction) – выясняем у слушателей, понравился ли им тренинг. В качестве инструмента используются стандартные опросники. В анкету можно включить вопросы об актуальности программы, доступности подачи материала, организации занятий и т. д.

 

Шаг #2 Научение (Learning) – определяем, какие знания приобрели слушатели в процессе обучения, есть ли прогресс в их компетенции и мотивации. Для этих целей предлагается применять специальные тесты и практические задания. Ещё можно провести деловые игры или, например, предложить коллегам кейс-тесты для оценки усвоения знаний.
 

Шаг #3 Поведение (Behavior) – отслеживаем применяемость полученных знаний на практике. Для оценки используем стандартные инструменты, например, оценку 360 градусов и оценку по KPI.
 

Шаг #4 Результаты (Results) – анализируем результаты, достигнутые специалистами после обучения. Сравниваем данные «до и после» по ключевым показателям для этих специалистов: например, заявкам, продажам, привлечённым клиентам, удержанию существующих клиентов, удовлетворённости клиентов и т. п.

 

Важное преимущество оценочной модели Киркпатрика в том, что она даёт визуальное представление об эффективности обучающей программы в компании. К ограничениям модели можно отнести трудности в измерении на уровне оценки поведения, а также неготовность некоторых руководителей проходить оценку и работать с коучами. И самое главное – отказ от расчета окупаемости обучения. 

 

Пятиуровневая модель оценки обучения по Филлипсу

 

Пятиуровневая модель Дж. Филипса (ROI)

 

Впоследствии программа оценки эффективности обучения персонала Киркпатрика была усовершенствована, расширена и дополнена экспертом в области управления персонала Джеком Филипсом. В частности, появился пятый уровень – расчёт финансовой отдачи от инвестиций компании в обучение.

 

Примечательно, что сам Киркпатрик высказывался против такой идеи: “Ни в коем случае не вздумайте переводить четвертый уровень (бизнес-результат) в деньги. Это не нужно, вы не сможете”. Однако для бизнеса действительно важна возможность оценить изменения в монетизации навыков персонала, поэтому Филипс предложил способ оценки инвестиций в обучение персонала – ROI6.

 

На ранних этапах проведения оценки выбираются финансовые показатели эффективности труда, которые измеряют до и после обучения. Полученные результаты переводятся в денежный эквивалент и используют для расчёта ROI7.

 

Стоит отметить, что реализация модели Филлипса возможна только в компаниях, где ведется управленческий и финансовый учёт. Сам Джек Филлипс советовал применять этот метод оценки только с наиболее дорогостоящими и долгосрочными образовательными проектами, так как к ограничениям метода относят его чувствительность к точности и системности данных, что делает его ресурсоёмким.

 

Формула ROI 2

 

Системная модель Стафлебима (CIPP)

 

В 1971 году профессор американского университета Мичиган Дэниел Стафлебим совместно с коллегами разработал системную модель оценки CIPP. Особенность этой модели заключается в том, что она позволяет оценить не только полученный результат обучения, но и сам процесс. 

 

Оценка обучения по системе CIPP состоит из 4 этапов.

 

На первом этапе, который называется context evaluation и переводится как оценка процесса, происходит выбор цели развития и выявление потребности персонала в обучение. 

 

Целями обучения могут служить снижение текучести кадров, мотивирование сотрудников, повышение профессионального уровня персонала, формирование кадрового резерва, снижение затрат на подбор, получение преимущества над конкурентами8. Этот этап позволяет HR-у ответить на вопрос «Что нам сделать?».

 

На втором этапеInput evaluation, означающим оценку на входе, оцениваются 

возможности, которыми располагает компания (бюджет, сроки и т. п.), а также рассматриваются различные альтернативы обучения – повышение квалификации персонала, подготовка и переподготовка сотрудников. 

 

Выбираются методы обучения: микрообучение (microlearning), наставничество, тренинги, семинары, карьерное консультирование и т. п. Подбираются оптимальные программы. Этот этап отвечает на вопрос «Как нам это сделать?».

 

Системная модель Дэниела Стафлебима (CIPP)

 

На третьем этапе process evaluation (оценка процесса) – оценки подвергается сам процесс обучения – насколько он соответствует первоначальному плану. Подводятся промежуточные итоги9. На этом этапе мы получаем ответ на вопрос «Делаем ли мы это по плану?».

 

На четвертом этапе происходит product evaluation (оценка продукта) – оценка результата обучения. Последний этап завершается ответом на вопрос «Программа обучения работала?». Становится ясно, удалось ли компании достигнуть заявленных целей или нет.

 

К ограничениям системной модели Стафлебима относят отсутствие оценки непосредственно перед началом обучения, что делает невозможным подсчет окупаемости проекта. Также модель имеет недостаточную детализацию и нехватку рекомендаций по применению каждого из своих этапов. 

 

Однако HR-специалист может воспользоваться моделью для оценки процесса внутреннего обучения, например, для оценки развития навыков клиентоориентированности менеджеров по продажам. Подобный кейс описан в книге специалиста по управлению, бизнес-тренера Елены Макоты «Игра стоит свеч. Как оценить эффективность бизнес-тренинга?»10.

 

Целевой подход Ральфа Тайлера

 

«Отец образовательной оценки» – как любят называть американского педагога Ральфа Тайлера – в 1942 году представил миру свой целевой оценочный подход Tyler’s Objectives Approach. Автор подхода сделал упор на постановку чётких целей и задач обучения, считая их размытость причиной подавляющего числа проблем в сфере образования.

 

Подход Тайлера состоит из 5 этапов, завязанных на ключевых целях обучения11.

Всё начинается с выбора целей и задач обучения и их систематизации. Следующий этап занимает поиск проявления выбранных целей в трудовом поведении сотрудников. Далее определяются ситуации, при которых они могут быть достигнуты. 

 

На четвёртом этапе определяются со способом оценки обучения. Последний этап является решающим: при обнаружение расхождения между запланированными и итоговыми результатами программа корректируется, после чего оценочный цикл повторяется снова. 

 

Преимуществом подхода Тайлера является высокая ориентированность на точную постановку целей, а мы уже не раз упоминали, что целеполагание определяет достижимость результатов при решении подавляющего большинства бизнес-задач.

 

Однако модель Тайлера исходно была ориентирована на образовательные процессы в учебных заведениях, и она не учитывает бизнес-ценности компании, стиль управления, корпоративную культуру и организационную структуру. Кроме того, по модели Тайлера сложно оценить окупаемость обучающего проекта12

 

Целевой подход к оценке обучения Ральфа Тайлера

 

Оценочная модель Майкла Берда (CIRO)

 

В 1970 году мир увидел ещё одну оценочную модель – CIRO, также известную по фамилии одного из создателей как модель Майкла Берда13

 

Оценка обучения по модели CIRO состоит из 4 элементов – content evaluation (оценка содержания), input evaluation (оценка входов), reaction evaluation (оценка реакции), outcome evaluation (оценка полученных результатов).

 

На этапе C выбираются цели и задачи обучения. 

На этапе I оцениваются ресурсы компании, а также подбираются оптимальные программы обучения, критерии оценки эффективности и будущих результатов.

На этапе R запрашивается обратная связь. Это может быть выборочный опрос среди сотрудников, которые прошли обучение. 

На этапе O подводятся итоги, полученные результаты сравниваются с плановыми. 

 

Модель CIRO во многом схожа с моделью оценки обучения Киркпатрика. Согласно ей оценка эффективности обучения также основывается на показателях удовлетворённости сотрудников процессом обучения и измерение влияния обучения на различные аспекты деятельности компании. 

 

Модель Берда близка к системной модели Стафлебима CIPP и имеет схожие ограничения – трудности в проведение регулярной оценки сотрудников, проходящих длительные программы обучения, а также отсутствие ясности и конкретности в процедуре оценки результатов. С той лишь разницей, что Берд оценивает реакцию обучающихся, а не само обучение. 

 

Модель оценки эффективности обучения CIRO

 

С чего начать оценку эффективности обучения и как выбрать оптимальный метод?

 

«Какую бы изюминку ни содержал ваш процесс оценки, наиболее важным аспектом являются вопросы, которые вы задаете»14, – говорит эксперт в прикладной теории оценки эффективности обучения Поль Кирнс.

 

Специалист в области оценки Фред Нихолс рекомендовал начинать оценочную процедуру с проясняющих вопросов15, которые могут помочь при выборе цели, критериев и методов. Основываясь на них, мы сформулировали 5 основных шагов, которые нужно сделать HR-специалисту, чтобы пройти путь от цели к реализации оценки эффективности обучения.

 

Шаг #1 Цель

 

HR-у важно понимать, что он будет делать с полученными в ходе оценки результатами, поэтому первый и главный вопрос, который стоит задать: зачем нам нужна эта процедура? Важно ответить не только с позиции менеджера по персоналу, но и с позиции руководства и сотрудников, проходящих обучение.

 

Например, вы оцениваете эффективность тренинга по влиянию и убеждению в коммуникации. Руководителя может интересовать: 

 

  • снизилась ли конфликтность внутри компании,
  • снизилось ли количество конфликтов клиентов и сотрудников,
  • изменились ли показатели лояльности и удовлетворённости клиентов и мн. др.

 

Сотрудникам же важно, помогает ли обучение легче и эффективнее добиваться нужных показателей по KPI, развиваться профессионально и добиваться новых карьерных достижений.

 

Важно помнить, что обучение должно соответствовать стратегическим целям компании, например, выход на новый рынок или увеличение прибыли, и решать конкретные задачи в разрезе этих целей. По итогам обучения далеко не последним аспектом оценки является соответствие приобретённых навыков и знаний сотрудников этим целям. 

 

Шаг #2 Критерии

 

Критерии оценки очень сильно зависят от её предмета. Обратите внимание на то, что вы собираетесь оценивать: тренеров, слушателей, процесс обучения, результаты или всё вместе. Чем больше аспектов, тем больше критериев оценки вам нужно и тем сложнее система. 

 

Конкретизируйте, что вы понимаете под продуктивностью обучающей программы и в чём она выражается. Критерии оценки эффективности нужно довести до сведения всех участников образовательного проекта: руководства, слушателей, тренеров, HR-ов.

 

Шаг #3 Метод 

 

Сравните между собой несколько методов оценки обучения. 5 из них мы коротко описали в этом материале, но это далеко не полный перечень возможных подходов. Изучите их преимущества и ограничения, обратите внимание, как это соотносится с вашей основной целью оценки. 

 

Если в первую очередь интересует качество обучения, полезны методы, глубоко оценивающие образовательный процесс. А если, например, финансовый результат, то подойдут методы, включающие оценку монетизации новых навыков сотрудников.

 

Шаг #4 Бюджет

 

Расходы на оценку обучения – важный фактор при выборе метода, будь то самостоятельная реализация или оценка с привлечением независимого эксперта. Некоторые методы требуют вложения настолько значительных ресурсов: финансовых, временных и трудовых – что у руководителей вызывает вопросы окупаемость уже самой оценки, а не обучения персонала.

 

В случаях, если вы уверены, что для оценки обучающей программы целесообразно применить сложный и ресурсоёмкий метод, полезно делать SWOT-анализ. Оцените сильные / слабые стороны решения, возможности и угрозы. Это поможет найти нужные аргументы, чтобы убедить руководителя. Или покажет, что применить более простые и доступные методы в вашем случае – более разумно.

 

Шаг #5 Реализация

 

После того, как проект оценки обучения персонала будет реализован, его итоги должны быть озвучены всем участникам.

 

Оценка прошла хорошо, если большинство коллег так или иначе высказали мнение о том, как прошла обучающая программа, что хорошего / полезного из неё вынесли обучающиеся и как изменился опыт сотрудников после обучения.

 

На основе обратной связи HR-специалисты, тренеры и руководители смогут принимать решения о том, что изменить в обучающей программе. Это может быть формат, как сделали в MW-Light. Или – акцент на практику. Или – системный подход. Или – геймификация, чтобы помочь закреплять навыки.

 

Узнайте больше о том, какие решения вы можете принимать на основе регулярной обратной связи от сотрудников – об их работе и, в том числе, обучении. Зарегистрируйтесь в Академии Yva.ai и получайте ценные инсайты от ведущих специалистов в сфере управления и HR – каждую неделю!

 

Yva-академия-5


  1. Как измерить эффективность обучения: ключевые метрики eLearning // iSpring.Елена Мамадалиева. 2020.
  2. Новая реальность: как перестроилось корпоративное обучение в онлайн // Rb.ru.2020.
  3. Оценка эффективности обучения. Модель Дональда Киркпатрика // HR-Portal. 2017.
  4. Эффективность обучения // Сбер Университет.
  5. Evaluating Training Programs: the Four Levels // Berrett-Koehler Publishers. Kirkpatrick, Donald L. 1994.
  6. Сравнительный анализ моделей оценки эффективности обучения персонала // Современные проблемы науки и образования №6. 2014.
  7. Что такое методика Филипса (ROI) // HR-Portal. 2009.
  8. Обучение и развитие персонала: как влиять на эффективность сотрудников // Директор по персоналу. 2020.
  9. Механизмы оценки эффективности корпоративного обучения // HR-portal. 2019.
  10. Игра стоит свеч. Как оценить эффективность бизнес-тренинга? // Елена Макота. 2014.
  11. Пятая дисциплина. Искусство и практика самообучающейся организации // Олимп-бизнес. П. Сенге. 2003.
  12. Контроль и оценка результатов обучения // Бизнес-класс. 2019.
  13. CIRO Model: The Definitive Guide // Kodosurvey. Jonathan Deller. 2019.
  14. Девять основных моделей оценки эффективности обучения // Ubo.ru. 2006.
  15. Оценка эффективности и мониторинг результатов тренингов на примере программы школы ораторского мастерства «ЛингваКом» // Treko.ru. Винярская Ольга Анатольевна.

 

Автор Yva.ai