标签:

测量L&D影响:VUCA气候中的一种现实方法

当组织受到压力时,很难获得L&D测量工作的购买,但我们仍然需要它。这是一个更加现实的方法,即在贫困世界中伸展的领导者。

2019年10月10日
常务董事 导致变革
分享此内容
商务人员在智能手机上查看性能图表
iStock / Relif.

自1954年Donald Kirkpatrick博士首次发表了导致许多学习和发展专业人士使用的Kirkpatrick模型的想法以来,在衡量学习和发展倡议的有效性方面投入了相当大的努力。

我们现在在一个充满活力和不断变化的世界中生活和工作。它是一种挥发性,不确定,复杂,暧昧(Vuca)的环境。

现在,企业需要更敏捷地对稍息的机会作出反应,采用新的战略,并构建(然后吸收)适应紧急趋势所必需的新功能。

虽然我尚未达到一个没有期待L&D投资的业务领袖,但我遇到了超过一些不想花时间或金钱的人在M&E上遇到了多个。

L&D专业人员通常来自客户的问题,如“人们如何在实践中应用它?”和'对业务结果有什么影响?'

我怀疑我们并不孤单地发现有希望的早期讨论测量性能当客户缺乏时间,资源或将建立履历可衡量的结果/影响并建立其财务价值时,投资和投资回报(ROI)通常会逐渐变细。必威 体育

此外,很难说服客户以一种有纪律的方式来衡量效率——那么有没有其他方法呢?

Kirkpatrick仍然是黄金标准

Kirkpatrick是最着名的M&E(测量有效性)模型,专注于四个不同的学习评估水平:反应,学习,行为和结果。

该模型的水平在一个层次中密切相关,以表明学习干预是如何有效地装备学习者的新技能和知识。它还研究了他们如何将学习应用于工作场所,以及这些行为上的变化如何为组织带来切实的利益。

其他衍生品包括评估投资回报和无形资产的水平(无法减少到其财务价值的福利)。

问题是,许多商业领袖不足以对“黄金标准”的重视。

许多神话围绕着学习效果的M&E,包括:

  • 度量(特别是ROI)太复杂或者需要花费太多的时间/精力。
  • 没有意义 - 高级管理人员不需要它。
  • 这太主观或不精确。
  • 企业不愿意为它付钱。

因此,关联培训交付和业务影响对许多人来说仍然具有挑战性。必威提现安全吗

做全面的柯克帕特里克式评估是复杂、耗时和昂贵的。

虽然我尚未达到一个没有期待L&D投资的业务领袖,但我遇到了超过一些不想花时间或金钱的人在M&E上遇到了多个。

常见的重复表达包括:“我们已经有太多事情要做了”、“我们的调查太多了”、“我会知道什么时候起作用的”。这表明it并不总是业务优先级,或者它被认为是繁重的。

为什么评估?

似乎很多人都意识到他们需要改进这一点 - 最近迈向成熟期,96%的受访者表示,他们希望改善他们收集和分析关于学习影响的数据的方式。不幸的是,只有17%的实际执行它,而且该数字随着时间的推移而减少。

大量学习现在是非正式的,自我指导,并随着人们从经验中学到的那样“在工作”中。

我们需要确保我们能够证明当代学习方法正在运作,当在培训室内不易观察到。

在一个理想的世界里,我们会隔离所有的变量,只测量学习的影响。可悲的是,我们并不是生活在一个理想的世界!

作为一名顾问,我冠军需要向商业决策者证明我的价值。

即使我没有获得评估的评估,即使我不收到支付,也将提高我的凭据和赢得更多业务的能力。

问问自己为什么需要评估学习,这对你和客户有什么好处。

案例研究

客户(高科技业务设计,制造和赛车式1辆汽车)希望实施模块化领导发展计划,旨在解决执行管理人员确定的机会。

他们认为该计划将帮助他们在竞争环境中保持或改善结果。

每个模块都附有简单的方案评价,以确定对学习交付的反应和满意度。必威提现安全吗

虽然学习是“热的”,我们询问了关于在工作场所申请的容易和建立学习者承诺的疑问。

我们通过三种方法实现了M&E:

  1. 人力资源业务合作伙伴和经理人被要求观察和注意具体做法和行为的证据,表明如何在实践中应用技能和知识。我们整理并比较了他们的集体观察和见解。
  2. 该公司已经进行了一项同行评级的领导力排名。他们能够为学习者群体提取匿名数据,看看在学习干预后排名是否发生了变化——事实上确实发生了变化。
  3. 在干预之前,我们确定了从客户的工作人员参与调查与我们预期改进的领域相关的一组问题。虽然在下次运行调查时,这些代理措施一直有所改善。

适应未来

评估关联性,但不要害怕真相

传统的M&E倾向于看待学习干预的反应。可以进行小调整以改善交付的测量。必威提现安全吗

If you’re doing an evaluation anyway, ask your learners questions about the relevance to their job, how easy it will be to apply this learning at work and the killer question, ‘would you this programme to others?’ – adapting the Net Promoter Score (NPS) methodology.

客户得到它。数字不会说谎,也没有藏身之处。

考虑变量,但不要担心他们

在一个理想的世界里,我们会隔离所有的变量,只测量学习的影响。可悲的是,我们并不是生活在一个理想的世界!

你会担心得发疯,试图找出每一个变量和每一个完美的衡量标准,即使你的客户有时间和金钱来投资——别费心了。

在播放多个变量的情况下,通过询问问题“对结果产生严重影响”来确定更具影响力的因素吗?“

例子包括:

  • 可能还会有其他有关的培训方案。
  • 预期的重组可能会影响学习队列。

一旦确定了重要因素,估计每个百分比的影响,每个百分比将有(或已经)在结果上。

当客户本身提出了结果应该是“贴现”外来因素的程度时,您可以实现更多可信度。

使用不同来源的数据进行验证

提前确定客户需要看什么才能“知道它在工作”。

按照柯克帕特里克原则,采取广泛的措施。结合观察数据和硬kpi,拥抱定性和定量数据,测量输入(学习的完成和学习质量)和输出(生产力或改进的交付)。必威提现安全吗

不要纠结于数据质量。利用你所拥有的一切,提前告诉客户:“如果我们提供这种干预,我们期待看到这些变化……”必威提现安全吗

可能是获得关于学习影响的最佳数据的最佳和最明显的方法是支持与经理教练,支持材料和行动学习群体的应用。betway必威官网平台

问'您希望我们如何衡量它们?'在原因和效果之间提供实证联系。

如果您有范围,请坚持试点组和控制组以验证结果。对照组不知道他们是谁,没有收到有关干预的信息。试点集团参与干预。

如果你有足够的勇气提前预测你预计会发生的变化,那么M&E就会变得与未来的决策非常相关,而不是历史成功的证明。

不要关注ROI,要关注学习的影响

评估学习的影响是一个比完整更容易的命题ROI测量

一旦您确定了更改的内容,就会制定机制以观察和衡量它们是否正在发生变化。

寻求使用现有的,客户验证,措施可能。如果它可用,始终更喜欢显示影响的数据。

可能是获得关于学习影响的最佳数据的最佳和最明显的方法是支持与经理教练,支持材料和行动学习群体的应用。betway必威官网平台

您还需要确定执行的任何组织障碍,并为他们做出积极的事情。确保奖励和识别系统鼓励“新”行为。

结论

当组织处于紧张状态,人们时间有限,并且存在不确定性和变化的背景时,可能很难说服客户以一种有纪律的方式衡量效率。

学习评价的基本原则没有改变。我们只需要找到一种方法来更好地衡量学习的影响,并适应我们所处的现实世界。

如果你什么都不做的:

  • 评估相关性,但不要害怕真相。
  • 考虑变量,但不要担心它们。
  • 使用不同的数据源进行验证。
  • 关注学习的影响,而不是投资回报率。

对这个话题感兴趣吗?读绩效管理:我们是否应该停止衡量培训和发展的投资回报率?

标签:

回复(1)

登录或者注册加入讨论。

《阿凡达》
通过bolaowoade
2019年10月10日09:22

顶级文章标志,真的很喜欢阅读这个。我喜欢评估的思考,因为它很容易理解和切实可行。谢谢。

谢谢(0)