24期基金通信 — 街坊情 植根新社区
R&D信箱
进行计划成效评估方法：“改变前后的比较”

今期我们将以基金於2013年开始在各计划推行的“社会资本成效评估”为例，介绍近年较常用的评估方法 ──“改变前后的比较”。

方法

• 一般会进行两次评估：第一次会于受访者参与计划前进行评估 (简称“前测”)，以了解受访者在未参与计划前各项评估范畴的状况 (即“基线” (Base Line) 数据)；第二次则会于计划完结前或受访者参与完计划后进行 (简称“後测”)^注1。
• 多以量化研究进行，研究员会预先把评估范畴设计成问卷。受访者在两次测试时，均会填写相同内容的问卷。

例子:	由基金所制作的“社会资本量表”，函盖量度社会资本六个范畴的问题。所有直接参加者及义工需在参与计划首一个月 (前测)及计划完结前三个月内 (後测)，填写最少两次相同的问卷，以比对他们在各项社会资本范畴发展的转变。

注1. 因应评估的需要，部分评估更会额外设有“中期”评估。

优点

• 由于有“基线”的数据作比较，因此评估结果能够清楚显示受访者参与计划前后的分别。

例子:	以下例子是基金其中一项资助计划之受访者的社会资本发展转变结果，六项社会资本范畴中，直接参与者及义工于计划中发展“社会参与”、“信任及团结”及“社会凝聚和包容”的表现较为突出，而此改变更在统计学上获得确认。 (见下表)

	参与计划前测试	参与计划後测试	效度
社会网络及互助和互惠(最高10分)	5.6	5.8	T(83)=-1.886, p=.063
信任及团结(最高10分)	6.9	7.2	T(55)=-2.793, p=.007
社会凝聚和包容(最高10分)	6.3	6.6	T(50)=-3.142, p=.003
社会参与(最高10分)	5.5	6.1	T(129)=-4.734, p=.000
信息及沟通(最高10分)	5.9	6.0	T(91)=-.328, p=.744
整体社会资本(最高50分)	31.9	32.8	T(25)=-1.439, p=.163

注：p≦.05表示计划参加者在参与计划前后的相关社会资本范畴表现，在统计学上有显着的改变。社会网络及互助和互惠

缺点

• 由于没有“控制组”(Control Group) (即“没有参与计划的人士”)与“实验组”(即“参与计划的人士”)的比较，因此评估结果未能反映受访者如有出现转变，是基于参与计划或是其他因素 (例如受访者生活环境的转变) 所导致。为此，近年不少评估已加入“控制组”的比对分析，从而更客观了解计划的成效。

研究及评估其实是很有趣的课题，如果大家有任何疑问，欢迎与基金秘书处研究及发展主任联系。