三A三力评价体系应用于公益项目评估案例——教育议题
发布时间:2023-02-06
浏览量:206

导读

北京社创咨询管理有限公司是友成基金会孵化的社会企业,聚焦社会价值评估、通过创新的数字化产品服务,赋能公益机构、企业和平台型组织,发现、比较、放大社会价值。

本文围绕教育议题,从A三力社会价值评价体系与教育议题专业评估模型结合的角度,分享某教师培训项目的评估案例。

 

公益项目评估案例——教育议题

1681442714895469.jpg  1681442616998780.jpg

 

A三力评价体系与教育类公益项目评估

A三力评估模型作为具有较强通用性和适用性的具有中国特色的公益项目社会价值评价体系,能够对公益项目进行全面而有效的评价,并获知项目在驱动力、创新力和行动力方面的优势和劣势,促进公益项目执行团队和组织梳理自己的战略、流程和运作,提高其在项目设计、管理和运作方面的规范化水平,同时还将为项目资助方、平台型公益机构等提供参考,支持其作出是否资助的决定,及相应的资助策略。

001.png

前两期所介绍的柯氏四级评估模型SEP模型等教育类项目评估模型,在教育培训领域具有良好的应用性和出色的专业性,尤其在教育效果的评价上,具有相当的科学性和有效性。

面对教育类公益项目,我们既需要考虑其作为公益项目所具有的普遍属性,又要考虑其作为教育项目所具有的特殊之处,因此有必要将教育类项目评估模型与三A三力模型科学结合,将专业模型作为三A三力模型的补充,充实评估所需的专业性维度内容,从而提升评估结果的准确性和实用价值。

以柯氏四级模型为例,其能够良好反映培训效果,因此作为教育类专业评估模型,可以有效补充三A三力模型中关于行动效果转化力(Action)的评估内容。可以说,无论是从议题专业度出发,还是考虑公益项目评估的全面性和社会价值属性,在评估实践中融合应用教育类评估模型和三A三力评价体系都有着重要而积极的意义。

本期,我们将继续围绕教育议题,从三A三力社会价值评价体系与教育议题专业评估模型结合的角度,分享某教师培训项目的评估案例。

 

评估特点

1.模型化

正如前文介绍,恰当地应用成熟专业模型会使评估工作“站在巨人的肩膀上”,起到事半功倍的作用。本次教师培训项目的评估案例即采取了模型化的评估思路,将公益项目评估的通用模型(三A三力社会价值评价体系)和教育培训项目的专业模型(柯氏四级评估模型)相结合,搭建出了一个适用于本次项目评估的专门评价体系。借助该体系,评估工作的开展将有据可循,评估的科学性、全面性和专业性都将得到提升。

2.指标化

指标化是模型化在案例评估实践中的细化和延伸。本次案例中的每一个评估要点均被细化为相应的量化或质性评估指标,并设有便于参评人员理解的题目与之对应。通过在线的深度评估系统,参评人员可以方便地填答问卷,有效地降低了参与评估的时间和精力成本。指标化的设计,使得评估内容不再显得空泛而冗长,根据具体指标收集而来的翔实数据为评估结果的取得做出了有力支撑,可以说,指标化进一步增强了评估的准确性和有效性,有数据支撑的评估结论更加令人信服。

3.标准化

基于模型化和指标化,本次案例实现了标准化评估。由于使用了成熟的评估模型和系统的评估指标,本次评估内容将在很大程度上可以应用于同类型其他公益项目的评估实践中,从而实现评估结果的横向对比;同时,基于同一套模型和指标体系在不同时间进行追踪调查,评估人员还可实现关于项目发展变化的纵向对比。评估的标准化拓展了评估方案和评估内容的复用性,也促进了线上系统在评估和生成报告中的应用,更使得公益项目间的比较有据可循,有助于不同项目、组织间的交流学习,有利于良性公益生态的建设和发展。

 

评估框架

本次案例以三A三力社会价值评价体系为总体评估框架,旨在从社会目标驱动力(Aim)、解决方案创新力(Approach)和行动效果转化力(Action)这三个通用维度评价公益项目普遍需要关注的重点内容;在项目成果评估部分,案例融合了柯氏四级评估模型,重点衡量教师培训效果,突出培训项目为受益教师带来的改变,从核心层面反映项目取得的关键成效。

所有一级维度下均设置三个二级维度,其中:

社会目标驱动力(Aim)下设二级维度分别为“组织及项目的愿景使命”“项目战略”和“资源禀赋”。组织及项目愿景使命反映项目及其执行团队的立意和初心,更体现其为达成目标所具有的信念和决心;项目战略反映项目为实现目标所进行的长期性、方向性设计,体现出项目团队对项目的宏观把控能力;资源禀赋反映项目所具备的各方面资源,这些是实现项目目标的有力支撑。

解决方案创新力(Approach)下设二级维度分别为“产品和服务”“模式和运营”和“财务匹配”。产品和服务重点考量项目理念和项目设计的创新性和独特性;模式和运营重点反映项目模式的开创性和可持续性;财务匹配重点考量项目资金的募集和使用情况。

行动效果转化力(Action)下设二级维度分别为“团队执行力”“项目管理专业度”和“项目成果和影响力”。团队执行力反映项目团队为实现项目目标,将项目设计转化为实际行动的能力;项目管理专业度反映项目各方面管理制度的专业性以及具体执行情况;项目成果和影响力反映项目执行的最终成效,是对项目目标的总体回应,也是衡量项目所形成社会影响的关键环节。各二级维度又细化为不同方面,从更加细致的角度对项目进行衡量和评价(详见下图)。

004.png

三级维度“项目成果”主要反映培训效果,根据柯氏四级评估模型,其设置了反映评估、学习评估、行为评估和结果评估四个层级。其中,反映评估主要考量受益教师对于培训内容、授课教师、平台建设以及目标达成方面的满意度;学习评估考量受益教师在专业理念、专业知识和专业能力方面的成长;行为评估考量受益教师在授课能力、教育理念、教学水平以及教学竞赛方面展现出的业务实践改善和提升;结果评估则从学校管理者和指导教师角度对受益教师的业务行为改善情况进行考量。除四层级评估外,对于培训课程体系建设的评估也被加入到“项目成果”维度,并最终呈现在评估报告之中。

 

参考资料来源:

[1]T/ZCL 003—2020《公益项目三A三力评估指南》团体标准https://www.ttstd.cn/TTStandard/ueditor/jsp/upload/file/20200619/1592549896456066650.pdf

[2] https://poorvucenter.yale.edu/Kirkpatrick