合作成果报告

也可从以下网址获得: 西班牙语
同义词:
参与式绩效故事报告技术

协作成果报告(COR)是一种参与式的影响评估方法,它基于一个绩效故事,展示一个项目如何对结果和影响做出贡献的证据,然后由技术专家和项目利益相关者(可能包括社区成员)审查。

由Jess Dart开发,COR合并贡献分析倍数证据线和级别(MLLE),将现有数据和其他数据映射到程序逻辑制作一个表演故事。绩效故事报告本质上是一个简短的报告,说明项目如何对结果做出贡献。尽管它们的内容和格式可能有所不同,但大多数都很简短,提到了项目背景和目标,与看似合理的结果链有关,并且有经验证据支持(Dart和Mayne,2005)。目的是使用多行证据讲述程序性能的“故事”。

COR增加了回顾专家小组利益攸关方,有时包括社区成员,检查证据的可信性,以确定发生了什么影响,以及这些影响在多大程度上可以可信地归因于干预。它是这些组成部分专家窗格l审查(成果小组)和合作方式来发展成果(通过峰会研讨会),将COR与其他成果和影响评估方法区分开来。

台阶

COR采用一种混合方法,涉及关键利益相关者的参与,通常在6个过程步骤中。参与可以发生在这一进程的所有阶段:

  1. 确定范围:举办初始/计划研讨会。在这个研讨会中,程序逻辑被阐明,现有的数据被识别和评价问题被开发。
  2. 数据拖网。可以包括主数据源和辅助数据源。通常,对现有证据进行数据拖网。可以招募项目工作人员帮助整理数据。
  3. 社会调查。社会调查可以包括任何形式的数据收集——定性的或定量的。如果是定性的,志愿者接受了简短的访谈培训和访谈指南,就可以进行访谈。这是一种非常有效的方法,可以让员工参与到数据中,并且对流程有足够的热情。否则,顾问或评估经理进行全部或部分面谈。在许多COR示例中最重要的改变(理学硕士)技术在社会调查过程中的某个时候被用作捕捉预期和意外变化故事的一种方式。
  4. 数据分析和集成。可以根据程序逻辑中的结果一起分析定量和定性数据。“结果图”通常用于整合不同的数据集和数据类型。
  5. 成果小组。将具有相关科学、技术或部门知识的人员聚集在一起,并向他们展示在步骤4中汇编的一系列证据。然后,他们被要求根据现有的知识评估干预对目标的贡献,并探索可以解释数据的对立假设。它可以代替公民陪审团。
  6. 峰会车间。在一个大型研讨会上,关键的发现和建议被综合起来,并识别和添加变化的例子(如果可以,使用MSC的材料,以及MSC的过程来选择最重要的故事)。该峰会应包括项目工作人员和社区成员等主要利益攸关方的广泛参与。

合作成果报告结构:该报告旨在探讨和报告一个项目对成果的贡献程度。根据《COR条例》,报告篇幅短,一般按下列各节编制:

  1. 说明项目背景和基本原理的叙述部分。
  2. 一个“结果图”(见faq),根据程序逻辑模型总结程序的成就。
  3. 叙述部分描述结果的含义,例如成就(预期和意外)、问题和建议。
  4. 一个章节提供了一些“小插曲”,提供了重大变化的实例,通常是第一人称叙述。
  5. 提供更详细证据来源的索引。

COR可以应用于多个部门或评估量表。当评估开始时没有明确定义的结果,或者结果是紧急的、复杂的或复杂的时,该方法特别有用。它已被广泛应用于海外发展、社区卫生和土著教育等领域,但大部分工作都在自然资源管理领域进行,澳大利亚政府在2007-9年资助了20项试点研究。

根据任务和选项映射方法

管理集群:

发展评估能力:让项目团队和工作人员参与社会调查和数据搜集。

COR可以帮助建立评估能力,因为它有一个具体的任务,让项目团队和工作人员参与社会调查或数据收集阶段。

定义群集:

开发项目理论/逻辑模型:COR方法的一个关键要素是开发项目逻辑。这用于绘制数据和结果,并讲述评估的“绩效故事”。一般来说,下面的例子中使用了结果层次结构。

描述集群:

结合定性和定量数据:COR非常适合结合多种类型的数据,如定性和定性数据。这部分是由于COR在MLLE中的基础,但也因为COR使用专家评审和峰会过程将这些数据类型连贯而有意义地编织在一起,并根据程序逻辑进行映射。

收集/检索数据:数据拖网。

数据拖网步骤利用项目记录和任何其他现有的监测数据为社会调查提供信息。

合成集群:

综合来自单一评估的数据:成果小组,峰会研讨会。

成果小组(专家小组的一种形式)和首脑会议讲习班都在评价过程中综合数据。

劝告

选择此选项的建议(提示和陷阱)

  • 当需要报告时,应提供简短明确的信息,并对证实这些主张的证据进行简单的审计跟踪。组织通常高度重视这些报告,因为它们在信息深度和简洁性之间取得了很好的平衡,并且易于员工和利益相关者理解。它们有助于建立一个可信的案例,证明已经做出了贡献。
  • 当有意愿将规划人员和其他利益相关者包括在这个过程中,并发展他们的评估能力时。编写报告的参与式过程为工作人员和利益攸关方的能力建设提供了许多机会。它们是启动一个新的监测和评估系统的好方法,因为它们涉及到对所有现有数据和数据差距的综合和反思(这是一个思考真正需要什么数据的好平台!)COR过程对于获得项目或评估过程的买入价和所有权是有价值的。
  • 用于回答有关投资对结果贡献程度的问题,COR主要关注于回答这类评估问题,因此不应被视为唯一的报告工具。需要其他方法和方法来回答有关投资或干预的适当性或其成本效益的关键评价问题。COR不是为解决这些问题而设计的。将来可能会将它们添加到这个方法中,但目前的方法不包括它们。
  • 利益相关者的价值观将被用作评估标准:COR的前提是利益相关者、项目工作人员和关键利益相关者的价值观在评估中最为重要。评估人员试图将他们的意见“括起来”,而是向小组和首脑会议参与者提供一系列数据摘要,供他们分析和解释。价值观在整个过程中都会浮出水面并展开辩论。与会者就数据来源的价值和意义进行了辩论,并就评价的主要结果达成了一致意见。
  • 当一个项目有紧急或复杂的结果,而这些结果在项目开始时没有完全定义时。因此,在评估过程开始时会刷新程序逻辑。此外,定性调查用于捕捉意外结果,审议过程用于理解调查结果。

使用此选项的建议(提示和陷阱)

  • 纳入利益相关者需要精细的管理和谨慎的协助:在错误的时间引入利益相关者可能会给评估带来问题,特别是在首脑会议阶段。确保将出席首脑会议讲习班或参与审查报告的所有利益攸关方的声音都包括在数据收集阶段是很重要的。这可以通过社会调查或数据搜集和文件审查来实现。如果它们不包括在内,峰会研讨会可以更加关注数据收集,而不是其真正目的——找出真相并提出建议。
  • 仔细关注关键评估。由于没有任何评估能够回答项目利益相关者可能提出的所有问题,因此在范围界定阶段,确定问题的优先级非常关键。所有参与者都应该清楚评估的内容以及评估的重点。
  • 管理成果小组需要考虑利益冲突:在成果小组中召集专家也需要仔细考虑,以避免利益冲突。虽然由于评估人员的性质,专家可能不可避免地以某种方式与项目有联系,但重要的是,他们没有自行设计项目或是项目的一部分,以保持中立。此外,在高度政治化的评估中,专家小组的结果可能令人担忧。在这种情况下,专家评估可能比COR更合适。
  • 确保绩效故事和数据收集不只是关注绩效的积极方面:COR被批评过于欣赏,或无法讲述糟糕的故事。虽然这肯定是一种风险,但该技术确实试图通过多种方式解决这一问题。首先,要求所有知情者描述该计划的优势和劣势。报告中记录了这些弱点或问题。第二,鼓励成果小组报告成果方面的消极和积极趋势。因此,在这个过程中“消极因素”是无法避免的。然而,结果报告的主题选择通常是有目的的,而不是随机选择的。
  • COR可以在鞋带预算上完成:可以通过对流程进行以下更改来降低成本:运行初始会议和计划会议;更少的采访;限制数据拖网的时间;将成果小组与峰会结合起来。;仅使用辅助数据;或者委托机构负责编制最终报告。然而,峰会研讨会是绝对关键的一件事。首脑会议是将评估联系在一起并将观点编织在一起的空间。如果得到有效管理,峰会将对调查结果进行实事求是,小组将提出建议。这是COR区别于其他成果和影响评估方法的核心要素。
  • 如果该计划已经有一个强大的监控、评估、报告和改进框架和流程:您可能不需要COR的所有要素。如果有明确的计划逻辑和全面的监控系统,您可能只需要添加COR流程的一些组件,如成果小组和峰会研讨会。COR过程整体上非常适合于收集了临时监控数据或没有开发和测试初始程序逻辑的情况。

资源

指南

例子

常见问题解答关于心脏

  1. 科尔来自哪里?

COR的灵感来自John Mayne关于贡献分析的工作。Mayne明确指出了报告违反程序逻辑的需要,并将其称为表现故事报告(Dart和Mayne, 2005)。COR采纳了这一概念,并将其扩展为分步处理过程和具体报告产品。其中一部分是有意参与和使用MLLE。

  1. 什么是结果表?

结果图表可以通过数据拖网和社会调查过程中产生的一系列证据来讲述程序的变化。这是一个在收集的证据旁边绘制活动、产出和结果的表格。

下载

下载此页面的PDF版本(1MB)。

引用本页

达特,J. &罗伯茨,M. (2014)协作的结果报告。从检索http: / / betterevaluation.org/plan/approach/cort

特别感谢本页的贡献者
作者
Clear Horizon咨询私人有限公司常务董事。
澳大利亚墨尔本。
作者
Clear Horizon咨询私人有限公司研究助理。
澳大利亚。
乘务员
Clear Horizon咨询私人有限公司常务董事。
澳大利亚墨尔本。
评论家
首席执行官,更好的评估。
墨尔本。

评论

匿名者的照片
金伯利

只是一个快速编辑说明-本页的第一段重复。

匿名者的照片
Nakea布莱尔

我想添加一个数据跟踪工具来衡量项目的预期结果。

西蒙达维的照片
西蒙·戴维斯

嗨Nakea。我鼓励你加入我们的讨论组,并把这个问题提交给我们的成员,他们中的许多人在这方面有专门知识。以下是你可以加入的链接:游隼讨论组-家

当做

西蒙

添加新评论

登录登录并作为BetterEvaluation成员进行评论,或者简单地填写下面的字段。