教育培训效果评估表需要过程数据支撑掌握度
每一轮培训结束,培训讲师都要交出一份教育培训效果评估表:完课率、课后满意度评分依次填入。但业务负责人追问员工掌握了哪些内容、哪些知识点还需要补训时,表内没有字段可以回答。问题不在表格不够细,而在可填的数据只产生于课后——满意度反映学员对课程的感受,完课率反映学习行为是否发生,都不说明知识是否被掌握。评估表要得出可用于改进的结论,需要先改变数据的采集位置。
效果评估表分四层,每层需指定数据来源
反应、掌握、应用、结果四层指标
教育培训效果评估通常分四层:反应层记录学员对课程的感受,来自课后满意度问卷;掌握层判断学员是否理解并记住知识点,依据学习过程中的作答与测验;应用层观察员工是否在岗位上使用所学内容,由业务主管确认;结果层比较培训前后的业务指标变化。四层是递进关系,上一层不成立,下一层的变化无法归因于培训。多数评估表集中在反应层,掌握层只有结课分数,应用层与结果层长期空白。
每项指标写明来源与采集时点
一项指标能否写进评估表,取决于是否有确定的数据来源、采集时点和填表人。三者缺一,该行要么长期空白,要么凭印象填写。四层指标的采集条件差别很大:反应层课后发放问卷即可;掌握层需要记录学员在学习过程中的作答正误、跳过行为与追问频率,课程本身必须具备这些环节;应用层由业务主管按约定观察点反馈;结果层需与业务部门商定统计口径。评估表应先确认数据来源,再决定写哪些指标。
教育培训效果评估的主要挑战
线上完课率与结课测试分数都不低,但员工面对客户的实际问题时仍无法准确回答和运用。学员通过刷课时和机械刷题即可通关,评估表因此记录不到知识是否被内化。
现有系统只记录最终得分,不记录阅读时长、是否跳过、答题正误与追问频率。讲师无法生成知识点级的掌握矩阵,也就无法判断业绩不佳是知识没掌握还是不会应用。
标准化课程无法兼顾不同基础的员工,老员工重复已知内容,基础薄弱的员工在关键节点掉队。评估表只呈现班级平均分,讲师无暇逐人辅导,结论难以转成个人的补学动作。
掌握度数据要在学习过程中产生
在学习过程中设置作答节点
掌握层要有数据,学员必须在学习中留下作答记录。UMU AI Generated Learning(AGL)使用 AI 将企业文档转化为互动式课程,同时支持课程创建与员工学习。AGL 在课程中设置互动任务节点,学员需要回答问题、复述知识、在情景中运用知识。这些作答记录,就是掌握层指标的数据来源。
掌握度追踪到知识点,补训才有依据
知识点级的掌握度报告
掌握度要成为评估依据,必须细到知识点。AGL 将学习掌握度量化到知识点级别,呈现学员在知识与技能维度上的学习路径图,并支持团队级的学习效果报告。传统测评只给出一个考试分数,效果指标也就停在完课率;现在讲师可以反查团队在具体知识点上的掌握情况,把掌握层填成知识点级的结论,据此安排定向补训。
AI 逐人辅导,评估结论落到个人
AI 承担讲授、答疑与练习
评估结论最终要落到学员的补学动作上。AGL 的 AI 同时承担三种角色:讲授时是 Trainer,答疑时是 Tutor,练习时是 Coach,依据学员情况提供个性化讲解、答疑和辅导。至此,作答节点提供掌握证据,知识点级报告给出评估结论,个性化辅导承接后续动作,三者构成一套可持续使用的评估方案。
AGL 让企业资料变成可评估的课程
新人培训:岗位资料转为互动课程
资料转为互动课程:AGL 将产品手册、业务流程和岗位资料组织为互动式课程,新人在学习中理解关键内容、回答岗位知识问题,并在情境中作出判断。
带教有据可依:管理者可以查看新人在各项学习活动中的完成情况与作答表现,判断哪些岗位知识需要再讲一次。
销售培训:在课程中练习产品讲解
产品价值当场解释:AGL 将产品资料组织为互动式课程,销售人员在学习过程中解释产品价值、回答常见客户问题,并根据反馈修正不准确的理解。
沟通前发现偏差:培训团队可以查看销售人员在相关学习活动中的表现,在客户沟通前发现部分理解偏差。