Скачать презентацию на тему модель дональда киркпатрика. Четырёхшаговая модель оценки результатов обучения Дональда Киркпатрика
Четырёхшаговая модель Киркпатрика
по оценке результатов обучения
Позволяет оценить результаты обучения персонала, используя четыре шага и задавая соответствующие вопросы:
- Первый шаг модели Д Киркпатрика: Как участники реагируют на обучающее событие? Понравился ли участникам процесс обучения? Что они планируют делать с новыми знаниями и навыками?
- Второй шаг модели Дональда Киркпатрика: Насколько участники усвоили знания, навыки и сформировали необходимые отношения по завершении обучающего мероприятия? Какие навыки, знания, установки изменились после обучения? Насколько значительны эти изменения?
- Третий шаг модели Киркпатрика: Как участники применяют на рабочем месте то, что они узнали во время обучения? Изменили ли участники свое поведение на рабочем месте после обучения?
- Четвёртый шаг модели Д Киркпатрика: В какой степени по итогам обучения достигнуты намеченные результаты? Оказывают ли изменения в поведении участников положительное влияние на организацию?
Задавая вопросы, можно понять, какого качества обучение компания получила от провайдеров. Самым эффективным будет считаться обучение четвёртого шага.
При этом необходимо понимать, что в случае если ответы на вопросы будут оцифрованы, то это касается 2, 3, 4 шага. В таком случае идеальным обучением будет считаться обучение 4 шага, имеющее экономические характеристики эффективности предприятия.
Эффективная позволяет проводить объективную оценку обучения персонала с определением основных неточностей и проблем.
Без оценки эффективности процесса обучения невозможно выстроить систему обучения и развития, которая обеспечивает необходимые бизнес-результаты. Потенциал наиболее распространенной модели оценки - Д. Киркпатрика пока, к сожалению, не полностью используется практиками. А с особенностями ее последней версии большинство наших HR-менеджеров вовсе не знакомо.
В 1954 году Дональд Киркпатрик (Donald Kirkpatrick) защитил кандидатскую диссертацию в Университете штата Висконсин (США) по теме «Оценка эффективности управления программами». Он предложил краткую формулу для описания цикла обучения: реакция - обучение - поведение - результаты . Разделение процесса обучения на этапы помогло объяснить, как обеспечить применение новых навыков на рабочем месте, без чего нельзя достичь желаемых результатов. Кроме того, практики получили инструменты для оценки эффективности каждого из этапов обучения. В 1959 году Д. Киркпатрик написал цикл статей для ASTD Journal*, в которых четко сформулировал критерии для всех четырех уровней оценки (таблица ).
Четыре уровня оценки обучения Д. Киркпатрика
Уровни |
Что оценивается |
Ключевые вопросы |
Уровень 1: |
Как участники реагируют на обучающее событие | Понравился ли участникам процесс обучения? Что они планируют делать с новыми знаниями и навыками? |
Уровень 2: |
Насколько участники усвоили знания, навыки и сформировали необходимые отношения по завершении обучающего мероприятия | Какие навыки, знания, установки изменились после обучения? Насколько значительны эти изменения? |
Уровень 3: |
Как участники применяют на рабочем месте то, что они узнали во время обучения | Изменили ли участники свое поведение на рабочем месте после обучения? |
Уровень 4: |
В какой степени по итогам обучения достигнуты намеченные результаты | Оказывают ли изменения в поведении участников положительное влияние на организацию? |
Первые статьи Киркпатрика стимулировали дальнейшие исследования в области оценки эффективности обучения (в основном на уровнях 1 и 2). В 1970-е годы четыре уровня Киркпатрика уже широко использовались многими организациями во всем мире, со временем они были оформлены в целостную модель оценки (Four Levels TM Evaluation Model) и приняты в качестве стандарта для оценки профессионального обучения. На протяжении 1980-х было разработано множество различных оценочных методов и инструментов, но внимание практиков по-прежнему концентрировалось на уровнях 1 и 2.
Только в 2005 году Дональд Киркпатрик предложил инструментарий для оценки уровня 3 (поведение), который описал в книге «От обучения к поведению» (Transferring Learning to Behavior) - в соавторстве с сыном Джимом (Dr. James D. Kirkpatrick). Обеспечение эффективного применения результатов обучения в реальной деятельности (перенос знаний и навыков) и сегодня продолжает оставаться одной из самых важных задач для многих обучающих организаций.
Изменения последних лет:
|
В 2006 году, в третьем издании книги «Оценка тренинговых программ» (Evaluating Training Programs), Киркпатрик значительно расширил сферу применения модели, базирующейся на четырех уровнях. Теперь основной акцент в ней делается на уровне 4 (результаты), поэтому модель может использоваться для оценки эффективности как программ обучения, так и процесса управления изменениями, и кроме того - для демонстрации ценности для бизнеса функции обучения в целом . Что важно, был пересмотрен алгоритм работы с моделью: сейчас предлагается начинать оценку «сверху» - с уровня 4, после чего последовательно продвигаться «вниз» - к менее сложным уровням (рис. 1 ). По мнению автора, это позволит сосредоточить усилия специалистов по обучению на достижении запланированных бизнес-результатов и поддержке необходимого поведения.
Нажмите на изображение для увеличения
Рис. 1. Измененная модель Киркпатрка: «Конец - это начало»
В 2007 году Дональд и Джим Киркпатрики развили свои идеи в работе «Применение четырех уровней» (Implementing the Four Levels), в которой предложили практикам принципиально новый подход: формирование «цепочки доказательств» (chain of evidence) для руководителей. Этот алгоритм позволяет специалистам по обучению собрать убедительные свидетельства, помогающие показать топ-менеджерам, какая ценность создается для бизнеса.
Алгоритм «цепочка доказательств»:
- концентрирует внимание руководителей на уровнях 3 и 4, где речь идет о влиянии обучения на достижение запланированных результатов и создании ценности для бизнеса;
- помогает использовать модель четырех уровней для измерения полученного результата , причем - на всех этапах, начиная с момента возникновения инициативы по обучению.
В этом его принципиальное отличие от традиционного подхода, в большей степени оценивающего эффективность процесса обучения (поскольку он сфокусирован на уровнях 1 и 2, внимание менеджеров в основном сосредоточено на затратах на обучение ).
По мнению разработчиков новой концепции, для того чтобы гарантировать результаты, необходимо еще до начала обучения определить:
- ожидаемые результаты;
- ключевые показатели;
- методы измерения и оценки.
И это еще не все изменения! Авторы добавили в модель еще один - пятый уровень оценки (уровень 5: «Рентабельность инвестиций»). Оценка эффективности обучения на этом уровне позволяет получить ответ на ключевой для бизнеса вопрос: «А стоило ли тратить деньги на обучение»?
Сильные стороны модели Киркпатрика (с точки зрения экспертов):
Ограничения модели:
|
Модель Киркпатрика успешно работает уже более 50 лет. Но существенные изменения в методах управления и организации бизнеса потребовали переосмысления роли функции обучения в организации. В то же время, как отмечают Киркпатрики, многие специалисты по обучению до сих пор не готовы принять на себя ответственность за все, что выходит за рамки подготовки и реализации учебных программ (особенно за результаты, которые прошедшие обучение люди демонстрируют на рабочих местах).
Продолжая творчески развивать свой подход, Джим Киркпатрик - теперь уже в соавторстве с женой Венди (Wendy Kayser Kirkpatrick) написал книгу Training on Trial: How Workplace Learning Must Reinvent Itself to Remain Relevant. Фактически это «руководство по изменениям» для корпоративных тренеров и специалистов тренинговых компаний. Эксперты настоятельно рекомендуют практикам в условиях кризиса:
- переосмыслить свою роль;
- активно расширять сферы своей компетентности за счет приобретения опыта работы в бизнес-подразделениях;
- усиливать свое влияние за пределами учебных аудиторий - предлагать решения, которые приносят ощутимые (измеримые) бизнес-результаты.
Но пока изменения «в головах» внутренних и внешних тренеров происходят очень медленно: многие из них все еще пытаются доказать свою незаменимость, используя показатели «уровень посещаемости» и «данные об оценках» (уровень 1), а также «результаты тестирования» (уровень 2). При этом бенчмаркинговые исследования убедительно демонстрируют: тот, кто начинает с уровня 1, очень редко доходит до самых высоких уровней оценки.
Авторы убеждены: подобное упорство специалистов по обучению наглядно иллюстрирует живучесть мифа о том, что само по себе участие в обучающем мероприятии автоматически способствует улучшению бизнес-результатов (уровень 4). Но сегодня стейкхолдеры расценивают подобную «наивность» как свидетельство неадекватности, что буквально провоцирует их задаться вопросами: «Сколько стоит это удовольствие? Какую пользу приносит?».
Джим и Венди Киркпатрики считают, что ситуация с репутацией функции обучения в глазах менеджеров очень серьезна. Чтобы исправить положение, специалистам по обучению уже недостаточно «просто» разрабатывать новые программы и методы обучения - сегодня они должны изменить принципы своей работы, научиться создавать реальные ценности для бизнеса и убедительно демонстрировать важность этих ценностей .
Авторы предлагают новый принцип, который поможет в корне пересмотреть подход к планированию и разработке обучающих программ: «Конец - это начало!» В качестве исходного пункта они советуют тренерам обсудить с руководителями:
1) ожидания бизнес-лидеров;
2) их понимание успеха (как желаемый результат «будет выглядеть»);
3) какие наблюдаемые и измеримые показатели успеха будут использоваться для оценки результата (уровень 4).
Итогом работы на этом этапе должны стать наборы HR-метрик, на основе которых рассчитывается новый показатель: возврат на ожидания - return on expectations, ROE (по аналогии с ROI - возврат на инвестиции). Затем специалисты по обучению должны обсудить с руководителями среднего звена, какое именно поведение критически важно для того, чтобы добиться намеченных результатов (уровень 3). Только после этого они могут приступить к проектированию учебных мероприятий (уровни 1 и 2), которые обеспечат формирование критически важных сценариев поведения сотрудника, необходимых для повышения его эффективности на рабочем месте.
Лишь на этой основе можно обеспечить:
- эффективное применение новых навыков и закрепление изменений в поведении на рабочем месте (уровень 3);
- достижение бизнес-целей (уровень 4);
- реализацию задач в области управления талантами (уровень 4).
Таким образом, метрики уровня 4 становятся краеугольным камнем в определении объема ответственности всех заинтересованных сторон. В свою очередь, четкое разграничение сфер ответственности является базовым условием для успешной реализации модели бизнес-партнерства.
Еще одно усовершенствование Д. Киркпатрика - разработка новой «Модели достижения целей». Особое место в ней занимают «драйверы» (или «усилители»). Драйверами выступают все процессы и системы (рис. 2 ), которые:
- усиливают действия (поведение);
- контролируют процедуры (мониторинг);
- вознаграждают демонстрацию критически важного поведения на рабочем месте.
Рис. 2. Драйверы («усилители») - поощряют или препятствуют закреплению новых поведенческих моделей
Эффективное выполнение рабочих задач обеспечивает совместное воздействие процесса оценки поведения (уровень 3) и драйверов. Без этой поддержки успешно применяется на практике всего около 15% новых знаний, навыков и установок, что снижает ценность обучения для бизнеса.
Новая «Модель достижения целей» Киркпатрика также позволяет специалистам выйти за рамки собственно обучения. Она помогает людям разрабатывать планы достижения целей, предусматривающие конкретные мероприятия/ действия (и измерение эффективности на всех четырех уровнях). Поэтапное планирование, ясное представление о конечных целях/ результатах, тщательный мониторинг выполнения мероприятий плана и объективная оценка каждого этапа процесса повышают вероятность достижения успеха.
Кроме того, модель Киркпатрика предоставляет консультантам в области обучения и провайдерам консалтинговых услуг методологию и инструментарий для того, чтобы они могли убедительно продемонстрировать своим клиентам, какие результаты получатся при реализации предлагаемых программ обучения и развития.
Новые разработки семьи Киркпатриков дают эйчарам эффективные инструменты, позволяющие им действительно стать бизнес-партнерами, наглядно продемонстрировать силу бизнес-партнерства тренеров, линейных руководителей и топ-менеджеров. (Опросник Д. Киркпатрика «Бизнес-партнерство» см. в приложении ).
Приложение Опросник «Бизнес-партнерство» (Kirkpatrick SM) Шкала оценки:
Интерпретация результатов Чтобы оценить, насколько хорошо отвечающее за обучение подразделение (специалист) соответствует интересам бизнеса, используйте шкалу:
|
Среди специалистов в области обучения и менеджеров широко распространен упрощенный взгляд на обучение. Этот подход породил ряд мифов, устойчиво циркулирующих среди менеджеров: Миф 1: «Каждый, кто когда-нибудь чему-нибудь учился, является экспертом в области обучения». На самом деле:
Миф 2: «Эксперты могут определить потребности в обучении». На самом деле:
Миф 3: «Реакция на обучение = обучение». На самом деле:
Миф 4: «Обучение непосредственно (само по себе) ведет к изменению поведения». На самом деле:
|
Зачем оценивать обучение?
В статье «Методы оценки тренинговых программ» (Techniques for Evaluating Training Programs) Дон Киркпатрик писал: «Я бы рекомендовал директорам по обучению проявлять инициативу в оценке учебных программ - до того, как придет день расплаты». Что удивительно, так это дата написания статьи в ASTD Journal - ноябрь 1959 года! За прошедшие полвека тезис о том, что процесс обучения, затраты на него и результаты должны оцениваться, казалось бы, стал банальностью. Но, несмотря на это, поэтапная оценка обучения, к сожалению, так и не изменила «модус вивенди» корпоративных тренеров.
- усовершенствование учебных программ;
- повышение эффективности подготовки сотрудников;
- демонстрация ценности функции обучения для топ-менеджеров.
Традиционно усилия специалистов по обучению были сфокусированы на наиболее очевидных результатах: эмоциональной реакции участников после завершения тренинговой программы. К сожалению, многие из сложившихся практик не соответствуют требованиям и нуждаются в усовершенствовании.
Чтобы проанализировать мнение участников о программе обучения (Уровень 1: «Реакция»), тренеры разработали множество инструментов. Их называют по-разному: «анкеты комментариев», «анкеты реакции», «листы улыбок» или «листы счастья» и т. п. Какой же должна быть форма, которая позволит получить максимум информации и в то же время потребует минимум ресурсов? Предлагаем несколько советов.
Можно начинать с отрицательных или положительных отзывов - это не принципиально.
Почему обязательно следует разрабатывать специальную форму? Во-первых , речь идет о клиентах (не имеет значения, внутренних или внешних), поэтому важно, чтобы они остались довольны программой. Некоторые коллеги, руководители или будущие участники учебных программ, наверное, спросят у тех, кто уже прошел обучение: «Что вы думаете об этом курсе?» Трудно представить себе. Какой урон будет нанесен функции обучения, если люди будут давать негативные отзывы о приобретенном опыте: «Только зря потерял время!», «Ничего, что пригодилось бы в работе» или «Откажитесь от этого, если сможете»… Во-вторых , скорее всего, негативно окрашенные слухи дойдут до кого-то из топ-менеджеров. Последствия этого могут стать трагическими для отдела обучения: скорее всего, руководитель не станет утруждать себя анализом общего мнения о курсе, а сделает вывод о его неэффективности (со всеми вытекающими последствиями). Поэтому поинтересоваться мнением участников важно в первую очередь для самих тренеров! Фрагмент из книги «Четыре ступеньки к успешному тренингу», Дональд Л. Кирпатрик и Джеймс Д. Кирпатрик, М. - Эйч Ар Медиа, 2008. |
С усложнением условий ведения бизнеса (рост конкуренции, увеличение роли человеческого фактора, финансовый кризис и т. д.) предприятия все больше стремятся к сокращению расходов и финансированию мероприятий, которые дают прогнозируемые результаты и наивысшую отдачу. В конечном итоге:
- Топ-менеджеры требуют оценить эффективность обучения на более высоких уровнях - Уровень 3: «Поведение» и Уровень 4: «Результаты».
- Многие компании отказываются от учебных программ, ценность которых не может быть обоснована с финансовой точки зрения (и, к сожалению, «до улучшения ситуации» увольняют специалистов по обучению персонала).
Это говорит о том, что сегодня в серьезной опасности оказались уже не отдельные тренеры/ тренинговые компании - во многих случаях под сомнение ставится необходимость самой функции обучения! Разрабатывая «стратегию спасения», Киркпатрики предлагают тренерам срочно изменять свое представление о мире бизнеса и осваивать в организации новые роли. Важнейшие условия изменения:
- выявлять потребности бизнеса;
- достигать практических (!), не просто выдающихся (!), но превосходящих ожидания (!) результатов;
- оценивать (в цифрах) свой вклад в достижение успеха и развитие компании и убедительно демонстрировать его всем ключевым заинтересованным сторонам.
Самое главное для тренеров - научиться действовать в «проектной рамке», как это принято в других функциях: предоставлять экономическое обоснование для получения средств (инвестиций) на проекты, заблаговременно планировать и бюджетировать их реализацию.
__________
* ASTD Journal
- журнал Американской ассоциации обучения и развития (American Society for Training & Development, ASTD)
дипломная работа
1.6 Модель оценки эффективности обучения Д. Киркпатрика
Как уже неоднократно упоминалось выше, проблема оценки эффективности обучения все еще остается актуальной для многих компаний, занимающихся развитием своего персонала.
Интересно, что вокруг предложенного Киркпатриком подхода не умолкают споры, еще в конце 1950-х годах, он сформулировал ныне известные 4 уровня оценки эффективности, однако его модель оценки тренингов остается одной из базовых, а его книги - наиболее цитируемыми. Киркпатрик рассматривает оценку как неотъемлемую часть цикла проведения обучения, который включает 10 этапов:
1. Определение потребностей.
2. Постановка целей.
3. Определение предметного содержания.
4. Выбор участников обучения.
5. Формирование оптимального расписания.
6. Подбор соответствующего помещения.
7. Подбор соответствующих преподавателей.
8. Подготовка аудиовизуальных средств.
9. Координация программы.
10. Оценка программы.
Киркпатрик считает, что в большинстве случаев оценка ограничивается использованием анкет по окончании тренинга - изучением непосредственной реакции слушателей на обучение. Он называет эти анкеты "листами для улыбки" (smile-sheets), имея в виду, что чаще всего участники используют анкеты для выражения благодарности.
Четыре уровня, по Кирктпатрику, определяют последовательность проведения оценки обучения. Он пишет: «Каждый уровень важен и влияет на следующий за ним уровень. При переходе от уровня к уровню процесс оценки становится более трудным и требует больше времени, но при этом позволяет получить более ценную информацию» .
· Уровень 1 - Реакция (Reaction)
· Уровень 2 - Научение (Learning)
· Уровень 3 - Поведение (Behavior)
· Уровень 4 - Результаты (Results)
1. Реакция
Оценка на этом уровне определяет, как участники программы реагируют на нее. Сам Киркпатрик называет это оценкой удовлетворенности потребителей. В случае, когда обучение проводится внутри фирмы, реакция участников не всегда интерпретируется как удовлетворенность потребителей. Зачастую руководство определяет необходимость участия в какой-либо образовательной программе. Киркпатрик подчеркивает, что и в этом случае реакция участников является очень важным критерием успешности тренинга, как минимум, по двум причинам.
· Во-первых, люди так или иначе делятся своими впечатлениями от тренинга со своим руководством, и эта информация уходит выше. Следовательно, она влияет на принятие решений о продолжении тренинга.
· Во-вторых, если участники не будут реагировать позитивно, то у них не будет мотивации к научению. Позитивная реакция не гарантирует успешного освоения новых знаний, умений и навыков. Отрицательная же реакция на тренинг почти наверняка означает уменьшение вероятности научения.
2. Научение
Научение определяется как изменение установок, улучшение знаний и совершенствование навыков участников в результате прохождения ими программы обучения. Изменение поведения участников в результате тренинга возможно только тогда, когда произойдет научение (изменятся установки, улучшатся знания или усовершенствуются навыки).
3. Поведение
На этом уровне происходит оценка того, в какой степени изменилось поведение участников в результате обучения. Киркпартик указывает на то, что отсутствие изменений в поведении участников не означает, что тренинг был неэффективен. Возможны ситуации, когда реакция на тренинг была позитивной, научение произошло, но поведение участников в дальнейшем не изменилось, поскольку для этого не были соблюдены необходимые условия. Поэтому отсутствие изменения поведения участников после тренинга не может быть поводом для принятия решения о прекращении программы. В этих случаях кроме оценки реакции и научения рекомендуется проверить наличие следующих условий:
· Желание участников изменить поведение.
· Наличие у участников знаний о том, что и как делать.
· Наличие соответствующего социально-психологического климата.
· Поощрение участников за изменение поведения.
Говоря о социально-психологическом климате, Киркпатрик имеет в виду прежде всего непосредственных руководителей участников обучения. Он выделяет пять видов "климата": запрещающий, обескураживающий, нейтральный, поддерживающий, требующий. Позиция руководителя, соответственно, меняется от запрета на изменение поведения до требования изменить поведение после окончания тренинга. Киркпатрик считает, что единственный способ создания позитивного климата - вовлечение руководителей в разработку учебных программ.
4. Результаты
К результатам относятся изменения, которые произошли в связи с тем, что участники прошли обучение. В качестве примеров результатов Киркпатрик приводит увеличение производительности, улучшение качества, уменьшение количества несчастных случаев, увеличение продаж, снижение текучести кадров. Результаты не следует измерять в деньгах.
По мнению Киркпатрика, оценка на этом уровне - самая сложная и дорогостоящая. Вот несколько практических рекомендаций, которые могут помочь в оценке результатов:
· если возможно, использовать контрольную группу (не проходившую обучение),
· проводить оценку через некоторое время, чтобы результаты стали заметны,
· проводить оценку до и после программы (если это возможно),
· провести оценку несколько раз в ходе программы,
· сопоставить ценность информации, которую удастся получить с помощью оценки и стоимость получения этой информации (автор считает, что проведение оценки на 4 уровне не всегда целесообразно в связи с ее высокой стоимостью).
К принципиальным недостаткам данного подхода относится тот факт, что выделенные информационные блоки не связаны между собой, кроме этого отсутствуют механизмы обратной связи, позволяющие управлять процессом генерации и передачи знаний.. Остальные трудности связаны с неразработанностью процедурного уровня сбора информации и ее обработки. Вследствие этого:
1) обобщенные числовые характеристики объективно не отражают состояния и отношения в измеряемой эмпирической системе;
2) используемые измерительные техники не обладают свойствами валидности, чувствительности и надежности;
3) не учитывается влияние внешних факторов;
4) не ясно, как выделить «чистый эффект» от обучения».
В 1954 году была создана одна из самых ныне известных моделей, подходящих как для оценки эффективности тренинга , так и для оценки эффективности процесса обучения вообще. Ее автором стал почетный профессор университета штата Висконсин (США) Дональд Киркпатрик . Он предложил разделять процесс обучения на четыре уровня, которые впоследствии и оценивать. Таким образом, по его мнению, можно будет обеспечить применение полученных в процессе обучения новых навыков непосредственно на рабочем месте и, следовательно, добиться максимальных показателей от данного обучения.
Рассмотрим, что же это за уровни, и что нуждается в оценке на каждом из них.
ПЕРВЫЙ УРОВЕНЬ — «РЕАКЦИЯ»
На данном этапе важно выяснить, как участвующие в обучении реагируют непосредственно на само обучение — нравится ли оно им, и для чего они будут использовать полученные навыки и знания.
Для оценки эффективности первого уровня могут быть использованы такие инструменты как листы реагирования (анкеты комментариев, листы улыбок, анкеты реакции), интервью, фокус-группы.
Листы реагирования
Главной задачей является составить их так, чтобы получить максимум полезной информации. Рекомендуется составлять от 8 до 15 вопросов для участников обучения, которые должны быть как открытые, так и со шкалами (например «пятибалльная шкала» или «десятибалльная шкала»), необходимыми для наиболее точной оценки мнений всех участников тренинга. Рядом с каждым вопросом нужно обязательно оставить место для комментариев. Целесообразно разместить в листах реагирования вопросы, позволяющие получить такую информацию, как: эффективен ли тренер и используемые им методы, соответствуют ли и насколько задачи курса целям деятельности, доступен ли был предоставленный материал, каким образом можно улучшить программу и т. д.
Желательно, чтобы анкеты были анонимными. Считается, что в таком случае ответы будут более откровенными.
Интервью
Интервью проводится после обучения с каждым из участников курса так же, как и в случае с анкетами, для получения обратной связи.
Фокус-группы
Фокус-группы могут быть использованы в случае проведения пилотных проектов. Первый раз мнения участников рекомендуется собирать через неделю после окончания проекта, второй раз — через 90 дней после проекта.
Результат оценивания первого уровня может быть выражен в ответах на такие вопросы:
- Для кого должен быть представлен данный тренинг?
- Какие методы будут более продуктивными?
- Когда должен проводиться тренинг?
- Что получил от тренинга его участник?
- Как он будет применять на своем рабочем месте полученные им навыки и знания?
Таким образом, как участники реагируют на курс, такова и есть его оценка. Реакция участников тренинга, по мнению Д. Киркпатрика, является достаточно важным критерием успешности и эффективности всего курса обучения.
ВТОРОЙ УРОВЕНЬ — «ОБУЧЕНИЕ»
Этот уровень предполагает оценку того, в какой мере усвоили участники новую информацию, сформировали ли они необходимые отношения, изменились ли и насколько их знания, установки под конец процесса обучения.
Для количественного измерения прогресса в обучении используются специально разработанные опросники, задания и тесты.
Инструментами, необходимыми для оценки второго уровня модели, являются: тест на знание изученного материала, лист проверки умений, составление плана действий, обучение других сотрудников.
Лист проверки умений
Лист проверки умений заполняет наблюдатель, который в ходе беседы с участником курса определяет его умения использовать полученные во время обучения навыки. В первой колонке листа выставляется оценка умения, во второй вносятся комментарии. Умения оцениваются следующим образом:
1 — неправильное использование умения;
2 — верное использование умения;
3 — экспертное использование умения.
Составление плана действий
Для составления плана действий участникам тренинга предлагается дать ответы на вопросы такого плана:
- Какие действия вы собираетесь производить?
- Что хотели бы научиться делать?
- Что может помешать вам в достижении успеха?
- Каким образом будете преодолевать возникшие помехи?
- Какая поддержка будет необходима для осуществления вами действий?
- Каких ожидаете результатов?
Еще один инструмент оценки — это обучение других сотрудников.
Его можно организовать в виде проведения различных презентаций для коллег из других подразделений, помощи в обучении и адаптации новых сотрудников, обучения группы в парах.
По мнению Д. Киркпатрика, если процесс обучения был эффективным, то должны произойти видимые изменения, т. е. улучшатся знания, усовершенствуются навыки и изменятся установки.
ТРЕТИЙ УРОВЕНЬ — «ПОВЕДЕНИЕ»
В данном случае нужно определить, изменилось ли в результате обучения поведение его участников, применяют ли они что-либо из полученных навыков и знаний на своем рабочем месте.
Инструменты оценки, использующиеся для третьего уровня следующие:
- контрольный лист поведения;
- обзор поведения;
- обзор работы сотрудников на рабочем месте;
- проверка планов действий;
- обучение действиям;
- фокус-группы.
В обзорном тесте можно использовать следующие вопросы: были ли получены новые знания; насколько улучшилось в результате обучения поведение на работе; через сколько смогли применять обучение в своей работе; если же до сих пор не получилось, то почему и т. д.
Д. Киркпатрик обращает внимание, что если изменения в поведении участников после обучения не произошли, то это абсолютно не означает, что тренинг был не эффективен. Бывают такие случаи, когда не были созданы необходимые условия, и, следовательно, даже при позитивной реакции на тренинг поведение участников не изменилось. Поэтому при оценивании очень важно проверять наличие следующих условий:
- есть ли желание у участников изменить свое поведение;
- понимают ли участники, что и как нужно делать;
- создан ли соответствующий социально-психологический климат на рабочем месте;
- присутствует ли поощрение участников тренинга за изменение их поведения.
ЧЕТВЕРТЫЙ УРОВЕНЬ — «РЕЗУЛЬТАТЫ»
Оценка того, в какой степени были достигнуты намеченные заранее результаты, и есть основная цель данного уровня, т.е. это оценка экономической эффективности обучения . Также важно отметить, принесли ли какое-либо положительное влияние на саму организацию изменения в поведении участников обучения.
Оценить четвертый уровень модели достаточно непросто, так как тут нужно определить, как изменились бизнес-показатели организации. Т. е. нужно правильно выбрать показатели , которые будут измеряться как до, так и после проведения обучения.
Д. Киркпатрик отмечает, что к результатам будут относиться изменения, произошедшие в связи с прохождением обучения участниками (например, увеличение продаж, улучшение качества, увеличение производительности и т. д.).
Проведение оценки необходимо осуществлять до, во время и после процесса обучения, а также через некоторое время, когда результаты станут более заметными.
В 1970 годы модель оценки эффективности обучения Д. Киркпатрика была уже достаточно известна и принята в качестве стандарта для проведения оценки непосредственно профессионального обучения.
Долгие годы автор модели проводил различные исследования, разрабатывая новые инструменты и оценочные методы, которые относились в основном к 1 и 2 уровням. И только в 2005 году им был предложен инструментарий, необходимый для оценки 3 уровня модели. Задача обеспечения наиболее эффективного применения полученных за счет обучения знаний и навыков в реальной деятельности до сих пор достаточно актуальна для различных обучающих организаций.
В 2006 году Киркпатрик выпустил уже третье издание своей книги «Оценка тренинговых программ», в которой основное внимание уделено 4 уровню модели, а также значительно расширена сфера применения непосредственно самой модели. Автор предложил использовать свою модель не только для оценки эффективности программ обучения, но и для процесса, связанного с управлением изменениями, а также для того, чтобы можно было продемонстрировать ценность обучения бизнесу.
Алгоритм работы с самой моделью тоже поменялся. В книге Д. Киркпатрика предлагается проводить оценку, начиная с 4 уровня и заканчивая 1. Так, по его мнению, специалисты, отвечающие за обучение, будут уделять должное внимание не только самому процессу обучения, но и поддержке нужного поведения, достижению запланированных бизнес-результатов.
По мнению авторов, для того, чтобы получить гарантированные результаты, прежде чем начинать обучение, нужно определить ожидаемые результаты, ключевые показатели и методы, с помощью которых будет осуществляться измерение и оценка.
ПЯТЫЙ УРОВЕНЬ — ROI
Также известен 5 уровень модели , разработанный Джеком Филипсом , благодаря которому должно стать ясно, стоило ли вкладывать деньги в обучение. Его показатель — ROI («возврат на инвестиции») позволяет перевести результаты оценки четвертого уровня в материальный эквивалент, далее полученная сумма прибыли сравнивается с затратами на курс обучения. Коэффициент ROI показывает процентное соотношение прибыли от курса обучения к сумме затрат на него.
Таким образом, модель Джека Филипса предоставляет возможность оправдать затраты на обучение, провести оценку курса обучения как бизнес-инструмента и показывает прямую зависимость увеличения продуктивности компании от обучения ее сотрудников, т.е. сделать обучение экономически эффективным .
Несмотря на то, что модели Дональда Киркпатрика уже более 50 лет, еще достаточно многие менеджеры и специалисты по обучению считают, что учащийся, когда-либо получивший какие-либо знания, уже является экспертом и может легко их применять. Но, как показывают практика и результаты оценки эффективности обучения по модели Д. Киркпатрика, это далеко не так. Использование данной модели позволит совершенствовать в дальнейшем учебные программы, а также повысить эффективность подготовки сотрудников.
Статья является собственностью профессионального портала для тренеров . При перепечатывании статьи ссылка на сайт обязательна.
Рекомендуем уникальные тренерские методички лучших упражнений для тренингов:
- Разминка "Воробьи-вороны"
Энергичное игровое упражнение, способное в короткие сроки включить участников тренинга в рабочий процесс, повысить их внимание, энергетику и вовлеченность. Создает позитивную атмосферу и, в случае необходимости, снимает напряжение в группе. Включает физическую и эмоциональную активность участников. Кроме функций разогрева группы это упражнение способствует формированию у участников тренинга позитивного и конструктивного отношения к своему проигрышу или неудаче . Помогает понять, что независимо от результатов своих усилий, можно просто получать удовольствие от игры. Этот принцип можно отнести ко всему в жизни и тем самым легче переносить неудачи и трудности.
Упражнение «Воробьи-вороны» не смотря на то, что было придумано много лет назад, остается эффективным и востребованным упражнением-разогревом у многих тренеров и по сей день. Причем подходит оно как для тренингов личностного роста, так и для бизнес-тренингов по продажам, переговорам, лидерству.
- Упражнение для тренинга переговоров "Шишки"
Сильное и запоминающееся упражнение-вызов, мощным и наглядным образом показывающее участникам, что успешность переговоров зависит от их умения слушать, выяснять интересы партнера и находить общее решение.
По своей легенде упражнение похоже на хороший экономический детектив, что сразу вовлекает участников тренинга, поднимает их уровень заинтересованности и мотивацию на дальнейшее обучение. Упражнение «Шишки» гарантированно «цепляет» участников и обычно запоминается как одно из самых ярких упражнений тренинга.
Упражнение идеально подходит для тренингов продаж и переговоров, как открытых, так и корпоративных.
- Ролевая игра "Случай в гостинице"
Яркое и запоминающееся упражнение , которое наглядно демонстрирует участникам тренинга слабые места в умении вести переговоры или устанавливать контакт в продажах, а также показывает, какие техники и приемы приводят к успеху в продажах и переговорах, а какие — наоборот. Какие — позволяют быстро установить контакт, а какие скорее накаляют обстановку.
Упражнение «Случай в гостинице» прекрасно подойдет для тренингов продаж, тренингов переговоров, тренингов уверенного поведения, тренингов влияния.
Благодаря необычной легенде упражнение «Случай в гостинице» повышает уровень вовлеченности участников тренинга, энергетику группы, мотивацию на дальнейшее обучение .
Оценка обучения проводится для того, чтобы понять, как повысить его эффективность, какими способами можно его улучшить.
В связи с этим предлагается ответить на следующие восемь вопросов:
· В какой мере содержание тренинга соответствует потребностям участников?
· Является ли выбор преподавателя оптимальным?
· Использует ли преподаватель наиболее эффективные методы для поддержания интереса участников, передачи им знаний, формирования у них навыков и установок?
· Являются ли условия для проведения обучения удовлетворительными?
· Устраивает ли участников расписание занятий?
· Способствуют ли аудиовизуальные средства улучшению коммуникации и поддержанию интереса участников?
· Была ли координация программы удовлетворительной?
· Что еще может быть сделано для улучшения программы?
Оценка обучения имеет четыре уровня:
1. Реакция (Reaction)
2. Научение (Learning)
3. Поведение (Behavior)
4. Результаты (Results)
Оценка на первом уровне - реакция определяет, как участники программы реагируют на нее. В случае, когда обучение проводится внутри фирмы, реакция участников не всегда интерпретируется как удовлетворенность потребителей. Дел в том, что участие в таких тренингах бывает обязательным. У людей просто нет выбора. Руководство компании определяет необходимость данного тренинга и обязывает сотрудников принимать в нем участие. Казалось бы, в этом случае, нужно говорить о реакции руководства. Киркпатрик подчеркивает, что и в этом случае реакция участников является очень важным критерием успешности тренинга, как минимум, по двум причинам. Во-первых, люди делятся своими впечатлениями от тренинга со своим руководством, и эта информация уходит выше. Следовательно, она влияет на принятие решений о продолжении тренинга. Во-вторых, если участники не будут реагировать позитивно, то у них не будет мотивации к научению. По мнению Киркпатрика, позитивная реакция не гарантирует успешного освоения новых знаний, умений и навыков. Отрицательная же реакция на тренинг почти наверняка означает уменьшение вероятности научения.
Научение определяется как изменение установок, улучшение знаний и совершенствование навыков участников в результате прохождения ими программы обучения. Киркпатрик утверждает, что изменение поведения участников в результате тренинга возможно только тогда, когда произойдет научение (изменятся установки, улучшатся знания или усовершенствуются навыки). Поведение - н а этом уровне происходит оценка того, в какой степени изменилось поведение участников в результате обучения. Киркпартик указывает на то, что отсутствие изменений в поведении участников не означает, что тренинг был неэффективен. Возможны ситуации, когда реакция на тренинг была позитивной, научение произошло, но поведение участников в дальнейшем не изменилось, поскольку для этого не были соблюдены необходимые условия. Поэтому отсутствие изменения поведения участников после тренинга не может быть поводом для принятия решения о прекращении программы. Киркпартик рекомендует в этих случаях кроме оценки реакции и научения проверить наличие следующих условий:
· Желание участников изменить поведение.
· Наличие у участников знаний о том, что и как делать.
· Наличие соответствующего социально-психологического климата.
· Поощрение участников за изменение поведения.
К результатам относятся изменения, которые произошли в связи с тем, что участники прошли обучение. В качестве примеров результатов Киркпатрик приводит увеличение производительности, улучшение качества, уменьшение количества несчастных случаев, увеличение продаж, снижение текучести кадров. Киркпатрик настаивает на том, что результаты не следует измерять в деньгах. Он считает, что перечисленные выше изменения могут, в свою очередь, приводить к увеличению прибыли. Оценка на этом уровне – самая сложная и дорогостоящая. Вот несколько практических рекомендаций, которые могут помочь в оценке результатов:
· если возможно, использовать контрольную группу (не проходившую обучение),
· проводить оценку через некоторое время, чтобы результаты стали заметны,
· по возможности, проводить оценку до и после программы,