一、涵义
柯氏四级评估:
反应—学员的反应
学习—学习到东西
行为—是否拿来用
结果—是否有用
Phillips的“五级评估六类指标”:
reaction and planned action-反应和预定计划
learning-学习
application and implementation-应用和实践
impact(tangibies and intangibies)-业务影响(有形或无形)
roi-投资回报率
二、你开展是"培训"还是"event"
以活动为导向→以结果为导向
以活动为导向:
课程与业务没有相关性
对于绩效问题不开展任何评估
没有明确的可衡量目标
未帮助课程学员开展准备工作以取得结果
未进行必要的工作环境准备以实现转变
未与关键岗位经理通力合作
未对结果或成本效益分析进行衡量
规划和报告仅以输入为焦点
以结果为导向:
课程与具体业务相关联
对绩效的效用进行评估
向学员沟通期望
营造环境,为实现转变提供支持
与关键岗位的经理以及客户建立合作关系
对结果和收益成本分析进行衡量
策划和报告以成果为焦点
三、关键的评估组成部分
关键的评估组成部分学习价值链:
L0:输入
L1:反应和预订计划
L2:学习
L3:应用
L4:业务影响(有形or无形)
L5:投资回报率
所有的培训效果评估最容易卡在L3,WHY?
L3特点:
绩效差距
员工的安全与健康风险
学习迁移对客户服务/满意度目标的重要性
学习迁移对组织战略的重要性
课程交付试点
L4、L5特点:
涉及课程使用周期
涉及课程与经营目标等相关问题之间的联系
涉及课程对于战略目标的重要性
高层管理人员对评估感兴趣
课程成本
课程可见性
目标受众规模和范围
时间投资
投资回报率方法论:评估策划-数据收集-数据分析-报告
评估指导原则:
1、开展高级别评估时,需要收集低级别的评估
2、策划高级别评估时,并不需要全面实施先前级别的评估
3、收集并分析数据时,采用最可靠的数据来源
4、分析数据时,选择最保守的计算方法
5、至少使用一种方法分离课程或项目产生的影响
6、如果对于特定人群没有任何改善数据,或者通过指定来源未获得任何改善数屈打成招,那么假设未发生改善
7、对改善估测数据进行调整,以纠正可能存在的估测错误
8、计算投资回报率时,避免使用极端数据,以及尚未证实的观点
9、对于短期解决方案的设资回报率分析,仅使用第一年的年度收益
10、分析投资回报率时,将解决方案、项目或课程的所有成本计算在内
11、无形衡量指标是指无法转换为货币价值的衡量指标
12、向所有主要的利益相关者沟通投资回报率方法论的计算结果
评估策划环节需就课程制定五级评估目标,若需过行ROI评估,则需增加ROI分析计划
评估策划V模型
评估策划V模型 评估策划V模型应用案例三、衡量反应
典型目标领域:
课程设计:课程目标、课程内容、教学材料、作业
课程交付:交付方法、引导师/讲师授课、场地设施/学习环境
潜在用途:计划改进、使用意愿、与工作的关联性、对于工作的重要性、新信息量、推荐给他人
对于课程的整体满意度
利用1级数据预测投资回报率关键问题:
课程结束时,问学员:
1、他们对哪些知识或技能得到了提高?
2、基于知识和技能改进,他们制定了哪些行动计划?
3、这些改进将会对各自所在的部门产生什么样的影响?
4、做出上述预测的依据是什么?
5、这项预测成为现实的可信度级别是多少?
6、将调整后的总收益与课程成本进行比较。
网友评论