编按：
时值年中，对多数社福组织来说，明年度的预算编列和经费申请即将开跑。除了政府项目，国内外民间大型资助单位也是申请补助的来源。随着需要补助的 NPO/NGO 愈来愈多，组织的社会影响力与计划成效评量成为补助的重要关键。本篇作者 Kevin Starr 与 Laura Hattendorf 分别是专门资助新创组织的穆拉戈基金会的管理与投资总监，他们从资助公司的角度，提出了他们对于审核补助时，评估各组织影响力的看法。
要评量一个公益组织为社会带来的影响，常像养小孩一样困难：不只花的钱会比预期的多，还必须全力以赴。对以资助新创公益组织为职志的穆拉戈基金会(Mulago Foundation)来说，评量受资助组织的表现至关重要。唯有如此，资助机构才能确定投资的钱能确实创造出正向的社会效益。事实上，不做成果评估的新创组织将不会获得基金会的青睐，因为把资源投注在这些组织身上，等于是拿着钱跟着瞎闯。
资助机构通常热衷于比较各个申请者之间的优劣，但穆拉戈基金会认为，投资前最先要做的，应该是以每个非营利组织或社会企业自身的条件来评量它们的表现。不管这些组织的目标是协助农夫脱贫还是照护流浪猫，必须要找到评量各个组织行动成效的方法，来了解它们是否不负期待、还是不幸失败。
虽然大型随机控制试验(randomized controlled trials)──亦即随机选取多个不同的社会情境和案例作为参照，以了解组织行动对于目标案例的成效──可以帮助资助机构决定是否应该加码投资，但这并不是用来了解投资成效的好方法。因为这个方法不仅所费不赀，也无法引领新创的公益组织该往哪个方向发展。因此，新创组织需要在有限的经费下，持续产出一连串高质量的信息以供评量。
不过，如果资料太过简陋，就无法进行有意义的分析，但将大把心力投注在资料搜集上，又会阻碍工作进展，而且信息过多也会让人难以消化。因此，新创组织需要一个简便又细致的方法来有效评量行动的成效。
对穆拉格基金会来说，投资者期待看到的是受资助的组织能针对运作状况做出有效评估，以利其掌握资金运用的效率。为此，基金会提供了 4 个实用的步骤，帮助投资者和受助组织思考如何衡量公益组织的社会影响力：
1、厘清想要达成的目标
2、选择正确的衡量指标
3、搜集高质量的数据
4、证明这些改变来自你们的努力
厘清想要达成的目标
要衡量一个公益组织的影响力，必须先确认你想要达成的目标是什么。大部分非营利组织的宗旨都过于拢统含糊，帮助不大。投资者期待看到的组织宗旨，要能够精炼成一个动词、一个目标族群，和一个可测量的目标，且长度少于 8 个(英文)单字，例如「协助非洲小农脱贫」和「防止 HIV 病毒在巴西扩散」。
简单扼要的宗旨提供了行动成败的定义，也是穆拉戈基金会审核申请者的第一步。如果一个公益组织不能清楚说明行动的宗旨，就代表他们并不清楚自己的目标，或者没有能力知道自己做得对不对。
选择正确的衡量指标
不妨问问你的团队：「如果你只能选择一件事来衡量成效，那会是什么?」先别管团队伙伴的抗议，这可是非常有用的练习。以上面提到的2个宗旨为例，答案可能会是「提升小农收入」和「降低 HIV 病毒感染率」。
有时候，一个指标就足以衡量行动的效果，但有的时候，会需要用到一组精心挑选的综合指标(指标数量越少越好)。如果一个行动和某个社会效果之间的连结能被清楚记录，就可以用这个行动当作衡量社会成效的替代指标。例如，肯尼亚小朋友使用蚊帐的比率，可以作为衡量疟疾死亡率是否下降的指标。
对资助者来说，如果一个计划无法找出可以用来衡量的行动，就表示这个计划太过含糊而不值得考虑。值得注意的是，虽然「提升意识」和「培力」可能是促使行动发生的关键要素，但投资者更感兴趣的其实是如何衡量这些行动带来的改变。
这个方法无法完全涵盖一个公益组织的影响力和成就，但对慈善投资者来说，已足够回答最关键的问题，也就是「这个组织是否能使命必达」。
搜集对的数据
好的数据有 2 个要素：可以显示行动带来的改变，以及具有高可信度。这代表搜集数据时，需要──
1.有可供对照的基准数据，并在适当的时间间隔之后再次衡量效果
2.用合适的方式、针对正确的族群(可以是任何人事物)搜集到足够的样本
要确认搜集到的数据是否优质，可以从逻辑面和技术面下手。从逻辑面来看，如果你对目标的基本社会情境有足够的认识，那么只要仔细检视效用评估计划里所使用的资料搜集方法是否合理，就可以大致评断这些数据的可信度。
糟糕的效用评估计划通常都经不起仔细检视：它们若不是缺乏适当的基准数据，就是问错对象，或是研究方法不符合在地民情文化。从技术面来看，样本的大小和搜集资料的技巧是两个最关键的元素，一个好的统计学家可以轻易帮你找出合适的统计方法。
证明这些改变来自你们的努力
「实质社会影响力」指的是社会情境在行动前后的落差。当你搜集到可以证明前后变化的数据时，还需要进一步阐明这些改善是源自于你们的行动。但是，这通常也是衡量社会影响力最具挑战性的工作，因为有时要估算「如果没有采取行动会是什么后果」非常困难。
公益组织可以从三个层次来阐明组织行动对社会影响的「贡献度」。以下依照这些方法的成本和复杂度由低而高的顺序来简单介绍──
描述贡献法
提供一个无懈可击的故事，说明改变的力量主要来自于你们组织的行动。这个方法常常被滥用，不过在特定的情况下依然能够成为有力的论证，特别是当改变非常显著并且和涉入的行动息息相关、变因有限，以及你们对目标的社会情境有深刻认识时。
配对参照法
在工作一开始时，便选定一些和目标对象相似的社会情境或族群，做为有效的对照。这个方法只在变因不多、可以找到适当的参照组，和能仔细追踪变化过程以确保没有其他意外因素造成干扰的情况下，才能适用。当然，天下没有完美的参照组，但只要能满足上述条件，通常就已经足够。
随机控制实验法
随机选取多个不同的社会情境和案例作为参照，以了解组织行动对于目标案例的成效。许多时候，随机控制实验法是证明组织贡献度的黄金法则，特别是当风险甚高、变因太多而无法找到相似参照对象来进行有效比对的时候。
不管选择哪一种方法来测量一个公益组织对社会的实质影响力，最重要的关键，是要保持诚实、好奇心与建设性的怀疑。资助机构应不吝于投资在演进的社会影响评估上，因为好的影响力评估不仅能嘉惠非营利组织、资助者和社会本身，更能协助每个梦想家打造更美好的未来。
本文转载自公益慈善论坛，
原文出处：Real World Impact Measurement
翻译：赖惠玲
