精华回顾 | 规模化学院核心课程之《规模化场景下的评估思维》
精选文章
2019-06-09

一个公益项目在没有规模化之前,目标人群明确,项目方案清晰,为项目成效评估奠定了基础。而项目开始规模化后,一些关键要素发生了变化,为成效评估带来了新的挑战。作为好公益平台“规模化学院”今年开设的三门核心课程之一,《规模化场景下的评估思维》课程由好公益平台与益研益行团队共同开发,希望为公益产品团队提供项目评估的思维和指导。

微信图片_20190606092518.jpg

△金敏超博士主讲《规模化场景下的评估思维》


课程一开始,益研益行团队负责人金敏超博士就提出了“项目目标”的相关问题,引导大家讨论“项目目标”与“评估目标”的关系,引出了“项目因果链”的概念。所谓因果链,简单地说,就是项目的干预方式和由此导致的结果。因果链是项目中的重要概念,也是项目评估的基本依据之一。那么,公益产品规模化过程中,哪些因素会发生变化,并对项目评估产生影响呢?

 

金敏超博士指出,公益项目在规模化中,目标人群很有可能发生变化。例如,一个儿童阅读项目原本在城市地区开展,在取得实际成效后,开始向包括乡村地区在内的更多地区推广。那么在新开拓的乡村地区,目标人群就从城市儿童转变为了乡村儿童。


此外,因果链也有可能发生变化:一种情况是链条的长度变化(往往是增加),比如因为规模化,本来由项目团队自己承担的工作变为由当地伙伴来执行,又或者在规模化的过程中增加了新的合作方,这样就会产生与合作方之间物资、技术、知识和人员上的流动;另一种情况是链条的强度变化(往往是变弱),比如项目中新加入的培训师/志愿者/合作机构,相较老成员,他们对项目理念、干预内容或工作流程的理解程度一般都要弱一些。



因果链是帮助组织厘清从行动到最终对用户产生价值的过程。在同一社会问题领域开展工作的公益产品,因为资源的来源方式和终极模式的不同,因果链上的关键环节和评估点也不同。


童萌亲子园是好公益平台上的一个优质公益产品,专注于0-3岁社区亲子早教,采用的是社会企业的模式。童萌亲子园的因果链设置参照了用户转化漏斗的AARRR模型(获取-激活-存留-收益-推荐),评估点落在用户的付费上。同领域的另外两个早教机构与童萌亲子园的资源来源和终极模式不同:机构H以筹资为主,其评估点落脚在亲子关系改善上;机构R的终极模式为政府采纳,其评估点放在儿童发展水平的有效提升上。


下图释义了童萌亲子园的因果链,其中绿色模块显示的“续费”为童萌的评估点,即童萌认为用户付费是用户认可的最好方式。红色模块“亲子关系改善”为H组织的评估点,因为H组织需要向捐赠人说明受益对象的正向改变,从而获得捐赠;紫色模块“提升儿童发展水平”为R组织的评估点,因为R组织需要向政府证明早期干预对人力资本促进的价值。


童萌亲子园因果链.png


△ “童萌亲子园”的因果链示意图



那么,项目如何应对规模化过程中产生的目标人群和因果链变化呢?金敏超博士认为,针对目标人群的变化,一种做法是对新的人群重新开展需求评估。



慧灵是专为成年心智障碍人士提供服务的公益机构。每当慧灵在一个新的地区开设服务前,都要对当地开展需求调研,包括访谈当地心智障碍人士家庭、调研当地的政策情况、调研同行机构、实地考察场地情况,拜访当地的社会企业等,通过这些方法了解新开拓地区的人群和他们的需求,再根据调研结果对服务进行必要的调整。


 

另一个解决问题之道是选择从成效倒推的方法。如果对新人群的干预效果依然和规模化之前的效果相同,那么可以认为目标人群的变化对项目成效没有影响或影响在可接受范围内;如果新人群的干预效果和规模化之前的效果明显不同,那么就需要审视人群的变化以及带来的影响了。

 微信图片_20190606102237.jpg

△ 小组讨论


针对因果链变化同样有两种应对方式。第一种还是从成效开始的倒推法,如果干预效果依然和规模化之前的效果相同,那么可以认为因果链没有显著变化或者变化没有显著影响。如果干预效果不同,那么同样需要审视因果链的变化以及可能的影响。

 

另一种是执行评估。所谓执行评估,是指针对项目执行阶段的评估,相似的概念是监测。可以从四个维度去评估项目的执行,分别是覆盖(某干预应参加人数是否达标)、时长(某干预实际执行长度是否达标)、频率(某干预实际执行频率是否达标)以及某干预关键的内容是否执行到位,干预关键内容一般是执行环节中最难或者是最核心的。

 

在项目评估的过程中,数据的收集和整理是必不可少的环节。金敏超博士还向大家介绍了数据收集的常见方法以及数据录入的原则和注意事项。


不论在中国还是世界其他国家,项目评估,尤其是规模化场景下的项目评估都是一项非常关键但又充满挑战的工作。通过《规模化场景下的评估思维》课程,好公益平台希望帮助公益项目在规模化过程中建立起评估的思维框架和意识,保持对项目的时时“自省”,推动项目质和量的提升。


平台动画 产品招募