Book

Measurement Demystified

Creating Your L&D Measurement, Analytics, and Reporting Strategy

Peggy Parskey and Dave Vance

ATD, 2020

Buy the book

Read, Listen, or Discuss

Amazon Kindle Discuss

1×

Войдите, чтобы прослушать аудиоверсию краткого изложения.

Editorial Rating

Мы составляем краткие изложения книг*, помогающих читателям разбираться в законах современного мира и менять его к лучшему. Материалы, которые мы отбираем для нашей библиотеки, должны отвечать по крайней мере одному из наших двух основных критериев:

Информативно. – Вы получите такую информацию, которая позволит вам более взвешенно и эффективно принимать решения.

Полезно. – Вы получите такие практические советы, которые помогут вам лучше делать то, чем вы занимаетесь.

Каждому материалу мы присваиваем рейтинг от 1 до 10 на основе этих двух критериев. Наш рейтинг поможет вам распределить книги в вашем списке для чтения по шкале от добротных (5) до выдающихся (10). По книгам, которые мы оцениваем ниже 5, краткие изложения не составляются. Вот что означают цифры рейтинга:

10 – Великолепно. Полезная и/или информативная книга, которая, помимо соблюдения высочайших стандартов во всех отношениях, выделяется даже среди лучших книг. Как правило, это книга, сразу ставшая классикой, которую должен прочитать каждый.
9 – Отлично. Полезная и/или информативная книга, очень хорошо организованная и написанная, имеющая множество достоинств и не имеющая недостатков, которые заслуживали бы упоминания.
8 – Очень хорошо. Полезная и/или информативная книга, которая имеет много важных достоинств, но при этом не может быть названа выдающейся: например, освещает последние открытия в своей области и написана известным специалистом, но в отношении стиля оставляет желать лучшего.
7 – Хорошо. Полезная и/или информативная книга, имеющая два и более важных достоинства: например, очень увлекательно рассказывающая о новых идеях в какой-то предметной области.
6 – Достойно внимания. Полезная и/или информативная книга, которая обращает на себя внимание по крайней мере каким-то одним аспектом, например четкой организацией материала.
5 – Добротно. Полезная и/или информативная книга, несмотря на очевидные недостатки. Например, в одной области автор может давать разумные советы, а в других или содержится много повторов, или нет ничего особенно ценного.

*getAbstract работает не только с книгами. Мы составляем краткие изложения всех видов контента, которые могут быть полезны нашей аудитории: помимо книг это статьи, отчеты, видео и подкасты. То, что мы говорим здесь о книгах, относится ко всем видам материалов, которые мы пересказываем.

getAbstract Rating

Comprehensive
Applicable
Insider's Take

Рейтинг помогает вам понять, какова ценность книги в соответствии с двумя нашими основными критериями. Но он ничего не сообщает о ее конкретных особенностях. Поэтому мы используем набор из 20 характеристик, которые призваны прояснить, в чем именно состоят достоинства книги.

Практические советы – вы получите рекомендации, которые практически осуществимы на вашем рабочем месте или в повседневных ситуациях.
Аналитический подход – вы поймете внутренние взаимосвязи и закономерности в рассматриваемой проблеме.
История вопроса – вы узнаете об истории и контексте проблемы, что позволит вам правильно провести анализ или совершить хорошо взвешенный шаг.
Особое мнение – вы познакомитесь с аргументами, которые расходятся с преобладающей в настоящий момент точкой зрения.
Подробное освещение – вы увидите все аспекты предмета, описанные исчерпывающим образом.
Конкретные примеры – вам предложат практические советы, которые иллюстрируются рассказами об их применении на практике.
Выразительный язык – вы получите удовольствие от мастерски написанного текста или речи, являющейся образцом ораторского искусства.
Увлекательно – вам будет трудно оторваться от текста или аудио.
Неизвестные факты – вы узнаете об удивительных фактах или умозаключениях.
Начальный уровень – информация будет для вас полезной, если вы новичок, у которого нет знаний по данной теме или опыта.
Продвинутый уровень – информация или рекомендации будут полезны вам как специалисту.
Острая проблема – вы окажетесь в гуще спора по поводу одного из насущных вопросов современности.
Новаторская концепция – вы узнаете о свежих идеях, концепциях, новых продуктах или тенденциях.
Рассказ инсайдера – вы познакомитесь с мнением человека, который имеет особый доступ к сведениям по обсуждаемой теме.
Источник вдохновения – вам захочется сразу же опробовать на практике то, о чем вы прочитали.
Обзор – вы получите общее описание предмета с упоминанием всех основных моментов.
Научные данные – вы узнаете о цифрах и фактах, подкрепленных научными исследованиями.
Взгляд в будущее – вы познакомитесь с авторской картиной будущего и тем, как оно может на вас повлиять.
Четкая структура – хорошая организация материала значительно облегчит вам восприятие концепции или применение рекомендаций на практике.
Спорно – вы познакомитесь с любопытными, но неоднозначными выводами.

Recommendation

This richly detailed manual on learning measurement promotes not only evidence- and data-based learning and development (L&D), but emphasizes the need to manage learning like a business. The relatively new Talent Development Reporting Principles (TDRp) by organizational development experts Peggy Parskey and Dave Vance incorporate measurement models that Kirkpatrick and Phillips crafted a half-century ago. Importantly, however, the TDRp extends measurement and reporting beyond learner satisfaction, application, business impact and return on investment (ROI). TDRp includes using metrics to manage learning performance by regularly monitoring and adjusting training programs.

Summary

Most firms measure learning only to gauge efficiency – quantity and learner satisfaction versus costs.

Most firms record the number of training courses they offer their employees, the number of learners who complete them and the direct costs of these programs. They tend to capture learner satisfaction with formal training as well through surveys or evaluation sheets that learners complete afterward.

However, fewer companies move beyond these basic efficiency measures to assess learning and development (L&D) effectiveness – including the degree to which employees apply what they learn on the job, and the business outcomes that follow. Only a small minority conducts a return on investment (ROI) analysis to assess whether the benefits of a training initiative outweigh the costs.

Useful models for evaluating learning effectiveness have existed for decades.

In the 1950s, Don Kirkpatrick built on the work of Raymond Katzell to suggest four levels of training evaluation. In the 1970s, Jack Phillips altered Kirkpatrick’s fourth level slightly, adding a fifth level for ROI analysis:

About the Authors

David Vance and Peggy Parskey run the Center for Talent Reporting and were instrumental in developing the TDRp. Vance was named chief learning officer of the year in 2006. Both consult and speak widely on the topic of learning measurement.

Comment on this summary

Sign in to share your opinion
G. K. 5 years ago

No

Measurement Demystified

Creating Your L&D Measurement, Analytics, and Reporting Strategy

Read, Listen, or Discuss

Editorial Rating

getAbstract Rating

Recommendation

Summary

Most firms measure learning only to gauge efficiency – quantity and learner satisfaction versus costs.

Useful models for evaluating learning effectiveness have existed for decades.

About the Authors

My Highlights

Comment on this summary

More on this topic

Learners who read this summary also read

Developing Human Capital

Make Training Evaluation Work

Implementing the Four Levels

Return on Investment in Training and Performance Improvement Programs

Measuring Leadership Development

Hidden Value

Related Skills