专家小组:[存档]整合监测和评价以加强卫生系统

这个话题一直是GHDonline最近讨论的前沿(见Hamish Fraser)，所以我很期待专门的专家小组如何发展这个讨论。这非常符合唐·贝里克的名言，“要改善医疗，你必须衡量它”。

同意,汉纳博士。事实上，在上面的陈述中，我们还必须首先定义“它”和“工作”。必须明确界定电子/移动卫生战略，以了解"成功"的必要基准是什么。我们还可以深入研究“研究”(research)与部署系统的“监测”(M&E)之间的区别。“研究”是一种寻求建立效能的“研究”，通过允许个人或群体随机接受或不接受干预，移动医疗实施的紧急、不受约束的范例所允许的“研究”，有时被“束缚”在设备上，需要测量，通常没有关于功效的奢侈数据，而是直接深入到有效性的问题。因此，一个挑战是理解在哪里设置定义成功的目标——在不知道在理想的交付和覆盖条件下，干预可能会有多好效果的情况下，偏见或生态谬误的风险通过随机化和时间匹配控制最小化。

附上一些有用的参考文件。

这是一个及时的讨论。督导评估计划是必要的，应在所有的设施/程序是制度化。但是，你如何规范整个资助者/项目指标，从而减少数据收集的负担在设施水平特别是在资源有限的情况下？是否有可能开发出“一个适合所有模型”中的纵向计划指标方面不管出资者？期待本次会议。

自从HMIS改革开始于印度的NRHM下，已有三年。数据输入和从642区上传到国家WebPortal的数据被稳定和发生而不会休息。现在关注数据质量。我建议亲切的访问http://www.nhsrcindia.org/thematic_data.php?thematic_resources_id=3和http://www.nrhm-mis.nic.in/。你会发现它非常有用，如果有任何呼叫，请不要犹豫与我联系。
sandhya Ahuja博士
高级顾问- HMIS -数据管理和分析
NHSRC
印度

当然对疟疾进行疟疾，但随着公共卫生的所有问题，需要成为当地的基础设施，顾问应该努力鼓励卫生部门在关键职位中雇用科学人员。为此，有必要在公务员制定职业机构。多年前，我被雇用在罗得岛（现在津巴布韦）。科学家们在公务员中的医疗学家和我的实验室有相同的地位，并且在我的实验室有昆虫学家，生物学家等（流行病学在那个时候被淘汰了！），但我们也需要这些人员。所以我想听听别人说的话，但这概念必须先被接受。从这里我们可以扩展到M＆E。克莱夫希夫

M和E的质量取决于数据的质量。绝对的。能力建设和推动获得真正可靠的数据是当务之急。

数据使用的动机可能是收集数据的人和提供数据的人(来源)将数据用于决策，而不是将数据的使用作为决策者的责任。

-

*“如果你想感到富有，只计算你拥有的所有钱
“买不到”***

对数据提供者/收集者的反馈机制的制度化是一个激励因素，并极大地提高了数据质量

-
Nyemazi

感谢大家参加这次专家小组讨论。作为提醒，专家小组将于4月2日（星期一）开始，但我们希望你在接下来的几天里继续分享你的想法和问题——非常感谢那些已经参与进来的人！

我们非常激动地宣布，我们将邀请到第五位小组成员，医疗保健改善研究所(IHI)的Pierre Barker博士，加入我们的讨论。Barker博士的工作重点是改善卫生系统，特别是围绕妇幼卫生和艾滋病毒护理。除了在IHI的工作，Barker博士还就卫生系统加强和重新设计艾滋病毒护理和婴儿喂养指南向世卫组织提供建议。

附件是Barker博士及其同事最近在世界卫生组织公报上发表的一篇论文，题为“改善公共卫生信息:南非夸祖鲁-纳塔尔的数据质量干预措施”。

再次感谢大家——我们期待一个丰富的讨论!

大家好——我们为已经产生的兴奋感到高兴。另外，我的从属关系是不完整的，我也是JSI研究和培训的艾滋病高级临床顾问，欢迎我的同事

卫生系统功能的任何有意义的评估都涉及数据排列中的真实性和正确性。

许多项目经理在实施基于是否同样是在现场级实现或不导致数据的操作和影响监测和评价工作方案和绩效评估采用目标导向的方法。

因此，除了卫生工作人员的动机和能力建设之外，卫生经理需要面向削弱不当强调目标成就的不利影响及其作为员工绩效评估工具的使用。

雅鼎Dholakia博士
HON。技术顾问
马哈拉施特拉邦反结核病协会
印度孟买

非常重要的是
1.数据报告与记录的数据匹配，并记录数据。测量值在任何保健机构的登记册中不存在的数据。
2.如果从不同的设施收集数据，那么它们被解冻到了它们的哪个以及如何操纵此级别的机会），并且来自所有设施的数据在指定的时间范围内收集所有设施，如果所有数据都是被报道。

托马斯造型。

我对这一主题的贡献将仅限于通过监测结核病患者的药物摄入和选择依从性差、需要直接观察治疗的患者来预防结核病药物耐药性的问题。对于那些对这个话题感兴趣的人，我的想法在附件的文章中有涉及。

我也有关于这种信息如何通过移动电话传输到患者的诊所和国家数据库的信息，价格低廉，我将向任何感兴趣的人发送电子邮件。

Jean Pierre Nyemazi的评论很好地提醒人们，监测和数据收集不能与卫生系统的其他部分隔离开来。例如，将良好的数据收集做法制度化，不仅意味着引入有效的机制(即机械过程)，还意味着必然在多个领域内发生的行为和管理变化。这要求我们从一开始就对系统进行整体概念化。

对于这种“系统”思维的一些良好资源，通过Don de Savigny及其同事在附加资源中概述了监测（和加强）卫生系统的复杂性的观点。

这些资源很棒。谢谢你！

我很激动，这个关键主题将被这样的专家团队覆盖的小组成员。我对关于如何在小规模诊所使用的监控和评估的意见特别感兴趣。现在，许多领域占据了基于证据的实践要求，但在给定的研究项目中确定的策略是有效的，或者在整体方面有效，必须在给定的做法中有一个福利，不太了解或评估。此外，我期待听证于应用监测和评估适用于建立实践中发展的策略（自下而上的方法）。传播研究过程与给定的研究研究的特定结果（例如，离散的干预方法）非常令人兴奋，在我看待许多领域的批判缺失。我期待着这次讨论！

尤其是在发展中国家的大多数健康设施中的员工是妥协/操纵数据的主要贡献者。这是因为，卫生工作者被提供服务患者和每天记录/夹具。大多数时间到卫生工作者，患者的优先事项，数据记录可能是之后的思考。由于向上问责制（因为它们是必要的），可以记录数据，但不是作为共享和使用质量数据的动机。因此，在设施级别解决工作负载，可能有助于数据质量。

-

“如果你想变得富有，那就数数所有金钱买不到的东西。

你在这里留在低收入和中等收入国家，所以更有原因是采用系统方法。我们发布的论文（参见Mphatswe）表明，提高数据质量的核心问题是增加收集数据的值。通过不断地将数据送回前线，并使用数据聚合器和记者来表现出工作的重要性，可以在不必提取更多资源的数据完整性，准确性和及时性方面进行重大改进。当然，资源是您无法克服系统改进的绝对瓶颈，有许多实例。

精彩的文章和数据感谢分享它对于重新思考我们的健康系统有关H Care Models /保险效率的东西非常有用？这一点对所有系统都非常重要，但很难衡量问候

我感兴趣的是如何在不牺牲太多细节和质量的情况下降低收集数据的成本。我相信人手不足是一个很大的障碍，而且我也相信，除非他们能将信息与自己的努力清晰地联系起来，否则向那些收集数据的人提供信息不会有多大帮助。在所有这些之上，可能是应用于劳动力的激励设计。

收集更少的数据。我们已经不使用现有的数据了。从质量和成本上看，越少肯定越好。

莎拉

除了乌斯曼拉扎的评论中，关于如何减少收集数据的成本，而不会影响太多的细节和质量“，我可以从14岁的第一手经验中发表评论在发展中国家的健康方面。答案是收集数据 - 一次 - 在eformat的关怀中，针对既定的患者数据库和其他相关数据库编辑它，然后将其电子方式分发到需要接收的位置的数据。减少了手动纸张的成本，并提出了呈指数增强质量的机会。基于手动纸的形式是所有发展中国家在eHealth进步的主要障碍。

健康伙伴计划管理指南是我们即将讨论的另一个相关资源。请在下面找到完整指南的链接，以及M&E专题单元的链接。

同意Ron的观点，一旦建立，电子数据收集系统的成本比硬表格低。但是，要达到这一阶段，就必须对长期存在的现行制度作出重大改变。根据我的经验，行为的改变和数据收集者和用户的接受，是一个比电子系统所需的物理基础设施成本更大的问题。然而，一些技术(如手机)继续渗透甚至最偏远的社区和人们愉快地适应这些。

乌斯曼·拉扎(Usman Raza)在行为改变和接受改变方面提出了一个很好的观点，从基于手册的纸质系统的用户到eHealth，这是一个有效的关注，适用于所有地方。但是，必须作出改变，以实现所有发达国家在1970年代初开始实现的效率，以及少数发展中国家在过去10年左右的时间里已经实现的效率。牙买加- -一个中等水平的发展中国家- -在1999年对计算机化的PAS(病人管理系统)进行了改变，并进行了一项研究，证明了PAS的效率。自19世纪50年代以来，所有英联邦国家都有相同的基于纸张的手工系统，所以我说，为什么要推迟这个不可避免的系统呢?

这是非常有趣的点。电子医疗记录（EMR）正在审判一些发展中国家。我听到正在实施EMR系统的发展中国家的同事的一些问题。我想在克服不同国家的经验，克服一些挑战：
•互联网连接等基础设施，电力可用性等
•数据传输到更高级别（从卫生设施到中央级别）是一个问题
•防病毒更新，
•在设施层面训练有素的人力翻身，这使得它昂贵。

关于莎拉吉布尔的深思熟虑，也请考虑
以下引用DA Henderson的话:

真正的人，真正的解决方案
今天的公共卫生预突出似乎是创造了更多
详细阐述迄今为止难以想象的技术的技术
数据。......在我看来，这将是更为有效的投资
这些专业人员的培训和支持。他们是我们所需要的
开发实解。²
在JHPH杂志特别版可供下载（全社论
2012, 11页;http://magazine.jhsph.edu/2012/technology/index.html.）

关于M＆E关于SmallPox根除计划......
然而，需要注意的是目标。我们努力
将数字保持在不超过五个操作数字。显然，有
有成百上千种可能的方法来衡量进步吗
可以被要求和编制。然而，我们的经验是那个
当数字超过时
四五位，关键员工已成为提交和编制数据所涉及的
很少有人将这些数据用于它原本用于‹的目的
监测计划实施中的优势和缺点
亨德森DA。eradiction的挑战：从过去的经验教训根除
竞选活动。int J Tuberc Lung Dis 1998;2（9）：S4S8。

尊敬，
克里斯吐唾沫的人

在坦桑尼亚等国家，具有非常广泛的主要医疗保健系统，使用双重（手动和EMR）系统是在立即进行的解除方法。纸质系统用于收集卫生设施中的患者信息和服务提供数据。摘要表单用于向地区级别发送报告，其中使用基于地区健康信息系统软件（DHIS）的计算机化系统收集，存储和分析数据。计算机使用计算机的使用增加了三个地区的数据质量，使用和报告，其中27个地区（SPD），其中DHIS在地区一级引入，MOHSW现在将其推出剩余的18个地区。

在这三个地区和SPD distrcts，从纸质汇总表的数据被输入到DHIS在地区层面。一些地区使用在线系统，这意味着，区域和国家层面可以看到，并立即访问数据一旦被捕获。在具有不可靠的电力和缓慢的互联网数据区被导出文件转移到地域性和国家层面。
同时，MHealth正在推出移动电话用于报告一些选定的信息和数据的地方。该信息还将被DHIS地区一级捕获。
面临的主要挑战与gultiineh Kebede提出的类似:
*缺乏地区及区域层面的医疗管理信息系统及医疗护理工作人员。目前，HMIS的重点人员也有其他职责。政府已经引入了地区和区域的M&E官员的职位，但由于各种原因，包括缺乏合格的候选人或预算或只是想改变，这些职位还没有填补)
*基础设施，如互联网连接，电力供应。移动电话公司发放的互联网调制解调器的使用增加了互联网接入，
*数据传输到更高级别（从卫生设施到中央级别）是一个问题。这已经通过使用Internet调制解调器和在线数据输入系统来解决。
*使用Linus操作系统而不是windows来解决病毒更新问题。还设置自动升级的防病毒定义。
*电脑维修仍然是一个挑战，因为缺乏农村地区的专业知识和缺乏资金的合同私人公司


Ipuge
-------------------------------
从我的诺基亚E7智能手机发送

这类似于我们国家（卢旺达）与艾滋病相关的数据，在地区层面直接向基于Web的软件捕获，但我们需要将其输入数据库之前加强数据的收藏者的分析能力。还需要数据质量审核的监督部门及改进数据收集

有人用过扫描仪来获取数据吗?至少在急诊室里没有住院病人那么多的文书工作。目前，我们在病人出院时将他们带着急诊室的文件送回家——这意味着我们没有任何关于实际做了什么以及哪些需要改进的记录。任何想法吗?

我们符合一些阻力，但希望我们有一旦我们有一个工作的电脑和扫描仪，我们可以做出审判，工作人员可能是可靠的....后来我们将通过Dropbox发送到美国的实习生，如果需要，可以做数据收集。... 有什么想法吗？？？

RE：Payel Gupta对资源有限国家的农村应急部门环境中的数据收集的探讨。

你的情况是典型的就是我们在农村乌干达都经历过。

全球紧急护理协同www.globalemergencycare.org(网站正在更新，但仍然可以使用…也可以查看网站上的宣传视频)目前正在从MS Excel切换到使用纸质图表的Access数据库，在急诊科出院时(回家时，如果数据库中的数据不清晰/不完整，则将纸质图表中的信息输入质量改进数据库，并使用桌面扫描仪进行扫描，以便存档(本地)和将来参考……这也有助于质量改进工作，否则图表就会消失，在努力提高护理质量时也没有其他医疗记录可参考。

我们关心目前正在建设（在美国）一个安全的服务器情况传输/存储数据。这种模式将使扩大到更多的ED站点和数据的收集整天没有上网的同步通过它，当我们做数据备份，每天一次。带宽是SSA的一个问题，尤其是在农村地区，小区覆盖是命中或缺失，似乎取决于一天和天气的时间变化。

我们认识到，从长期来看，这可能不是理想的情况，但鉴于乌干达农村地区医院的电力/技术限制，我们也在努力确保可持续性以及数据完整性和安全性。从长远来看，我们希望培训我们的紧急护理从业人员和乌干达的支持人员来执行计算机数据输入和扫描图表，但我们还没有发现这是可靠的……在这种情况真正发生之前，我们还有一段路要走。

GECC....也欢迎您提出任何建议

Brad Dreifuss，MD
全球紧急护理协同
董事会成员
研究共同董事
http://globalemergencycare.org
http://vimeo.com/17141360

谢谢Dreifuss博士——GECC看起来是一个令人印象深刻的组织!您的评论非常有帮助——我认为为了存档，扫描似乎是一个好主意(也环保!)——再次感谢您的评论/建议。

也对萨拉金贝尔的极好的响应点，并从健康伙伴引用一个同事的“使用它或失去它”。通常，我们收集超出需要什么数据，做没有用我们所拥有的一切，并在数据质量，因此数据的效用的成本。已经有下降的监测数据，同时还提供一些见解何处集中有限的资源用于改进方案的体积一些创新的方法。一个例子已经LQAS其已经被用于靶，其中更深入的监测或可能需要评估（批次质量保证取样）。（许多）的一些例子包括在乌干达工作（http://uphold.jsi.com/Docs/Resources/Conferences/using_lqas_roll_back_malaria..。）使用大型国家批量质量保证抽样的健康和营养:(http://siteresources.worldbank.org/HEALTHNUTRITIONANDPOPULATION/Resources/281..。）。（这两个引用都是免费的在线）。我们还使用这种方法来查看设施和CHW电平的数据质量，以帮助使我们收集更多的数据，对节目评估和快速改进

这是非常重要的，我们首先要决定哪些数据被收集。数据的选择应该是这样，它应该有助于至少有2个指标。此外，我们需要决定在不同层次需要的指标数。在块级（印度上下文）的要求指标的数量比在地区层面，降低更多，因为我们向前向上样的状态，并在国家层面。收集的数据的频率也维伊重要。一些数据（如业务数据），可以每月需要，其他数据，如ANMS的trainnig。医生和其他工作人员不同的技能，可以quartely收集和HR /基础设施状况，每年可收集。一些数据，如在任何地区，种姓/ STS人口等符合条件的夫妇最好通过年度调查来完成。

我完全同意你的观点。我们应该考虑“是什么”和“为什么”，并与“谁”、“在哪里”、“何时”和“如何”相补充，当我们创建实施M和e的计划的基础设施时，这将更加有益，在资源有限的情况下，结构效率在第一阶段非常重要。我总是记得代码KISS -保持它的简单(但有足够的意义，以推动程序前进)。

综合参与对于任何努力的成功始终至关重要 - 包括当地社区，他们是他们的医疗保健系统中的利益相关者。

谢谢你们所有对辩论的巨大贡献。我期待着下周加入小组，并从大家学习。保罗琳

我想继续讨论M和E需要收集多少数据!正如Lisa Hirschhorn所说，LQAS可能是一个答案，可以决定我们在哪里需要更深入的监控和/或评估!但反过来也需要验证:是否已经有一种方法来帮助我们确定哪些地方需要更少的监控和/或评估?这种情况经常发生在发展中国家，那里收集了所有可能的现有数据，但它们既不使用也不分析，甚至更少用于决策!

我注意到，捐助者需要从他们资助的项目中收集更多的数据(利用和产出，如果不是结果的话)。然而，使用这些数据进行程序改进的能力是有限的。改进的一个关键重点可能是建立存储和分析数据的技能，以及使用它来做决定。同意LQAS有潜力…这既是因为小的随机样本可以在本地/直至水平上作为更深入研究的筛选，但同样重要的是，它们可以被汇集和加权，为更大的地区/国家数据创建一个稳健的随机样本。

在当前的一周内，今天官方专家小组讨论的讨论，已经存在一些有价值的员额和思想和资源的交汇处。因此，我想强调到目前为止从讨论中出现的一些主题。我希望在接下来的五天里，这些将继续作为进一步讨论和分享潜在解决方案的领域，因为新主题也出现。当我们审查帖子时出现了一些：

1.需要确保系统内的数据质量和反馈回路，以促进这一目标

几位与会者评论了确保数据高质量的必要性，并指出确保数据的使用有助于实现这一目标。这些帖子强调了一个强大的反馈回路的必要性，其中包括数据提供者，“一个激励因素和大幅提高数据质量”，并关注于测量和确保数据质量。还讨论了数据收集能力建设问题。Barker博士还在《世卫组织公报》上发表了一篇相关文章，题为“改善公共卫生信息:南非夸祖鲁-纳塔尔省的数据质量干预措施”，文中强调，“提高数据质量的核心问题是提高所收集数据的价值”。

对系统的需求还突出显示了数据质量。“例如，良好的数据收集实践的制度概述，建议超过引入有效机制（即机械过程），而且也是在多个域内发生的行为和管理变更。这要求我们从一开始就会整体地概念系统。“提到的挑战包括由于人员配置模式，明确或隐含压力，以操纵数据，收集成本和数据需求和数据来源的统一性。

2.如何将收集的数据量保留并分析为M和E的一部分，以可行但有效的金额。

这项主题是通过许多参与者作为持续挑战讨论的。一个讨论者反映在小痘消除努力中汲取的经验教训，参考了Da Henderson：“谨慎一句话，应该说目标。我们努力将数字保持为不超过五个运营。显然，有数百种可能的进展测量可以要求和编制。然而，我们的经验是，当数字超过四五年时，关键员工在提交和编制利用数据的提交和编制数据时所涉及的主要员工才能监测计划实施中的优势和劣势。还注意到包括使用LQAS的过去提到的创新，以及较旧的格言“亲吻”（保持简单），提醒参与社区的重要性。

3.使用数据来改善护理和服务的重要性

需要确保收集的数据也被用于“改善医疗，你必须衡量它”。然而，一名答复者对潜在的陷阱提出了警告，特别是针对目标的方法:“许多项目经理在实施项目和绩效评估时，基于是否达到相同目标而采用的目标导向方法，导致现场层面的数据操纵，并影响监测和评估过程。”

4.电子保健和其他电子数据捕获举措的作用和挑战是什么，以降低成本，提高M和E数据的质量和使用

讨论内容包括使用基于文件系统的饲料汇总数据到HMIS系统在坦桑尼亚只利用电子方式和要实现这一目标所需的基础设施的一些关切等机型。其他有趣的在更紧急状况下的设置，包括使用扫描仪捕获方法。M和E的潜在作用，以确定新的和有前途的领域开发的做法和模式也进行了讨论，我们希望参与者同时利用监测和评价是的份额例子“适用于建筑的证据在实践中发展的战略。”


我们期待在本周的专家小组会议上听取各位对这些重要议题的看法，以及对重要议题或其他议题提出的新问题的看法。请继续分享您的经验和问题，以及可能的或实施的解决方案。

以下是我们作为一个小组对本次讨论的第一个问题所提出的问题的一些想法的简要总结。我希望各位成员和其他小组成员继续就这个议题提出建议和意见:

1.我们如何平衡评估的需求（“它是工作？”），需要监控和使用数据，以实时地改善计划，以确保问题，“它是如何工作的？”也得到解决？

这就提出了已经在讨论者需要阐明的问题来限制我们测量，以确保数据的质量和使用与评价项目的影响力所需的详细信息。我们一直在观察这些为相关但不是100％重叠活动和思维战略性什么对项目经理需要每周启动/每月/每季运行和完善，可以用什么，如果较长时期所需要的除了测量目标已经实现。这里关键的是综合监测和QI的典范。We also discuss what level of ‘proof” do we want, recognizing that we can not afford to do probability or even plausibility, for every activity, but do need some measure if we did what we said we were going to do and if goals were met. Then mapping out the data needed, estimating resources leads to a realistic plan in terms of what we can actually do effectively and support the programs implementation.

捕捉“它是怎么工作的”需要更多的定性方法，以及和我们感兴趣的是参与者的经验在做这个没有‘淹死的数据。’

除了Lisa的回答外，我还想就小组的第一个问题补充几点想法：

1.在平衡评估和监测时。

这是为实施健康计划的常年问题（在HSS或更广泛的域名中）。在我的经验中，我看到了更多的重点是'M'而不是'E'，尽管我已经注意到（或者至少要呼吁）的转变更加严谨的评估。有许多原因强调我想要注意的计划监控。一个是，数据通常可以通过常规信息系统更具可用的，这更好地符合程序监控方法，以更及时的方式成本。其次，许多组织正在努力为昂贵的评估或时间提供有限的资金，以收集，分析和现状，以便在适当的成果上延伸超出项目视野。第三个原因是，严谨的评估难以做到，具有许多方法论挑战可能导致平坦结果（捐助者和捐助者和执行机构），或者可能导致有限的行为能力有限。最后，许多资金举措不需要严格的评估，而是更加重视监测功能。因此，内部容量建立了监控而非评估，并且不平衡延续。

由于这么大量的制度结构和项目设计是由资金驱动的，因此在监测和评估之间突触平衡需要结构反应。如果捐助者和政府需要一个强大的评估组件，建立在他们的资金的初步设计中，如果他们留出足够的评估资金，如果项目获得足够的时间表，则能够使干预措施能够对作为零件测量的结果产生影响评价方法，然后在监测和评估之间存在更好的平衡。如果我们遵循当前结构，重点将继续进行，整理和发送常规计划数据（从大部分疾病特定领域），并在该地区建立机构能力（以牺牲评估影响的能力为代价）。

因为这次讨论侧重于加强卫生系统的M＆E，所以我认为这也值得突出计划和项目之间的紧张关系。通过健康部门介绍的资金更多地关注建筑和维持计划，这些计划通常是国家的范围，而通过非政府组织的资金往往专注于项目。需要与项目/计划划分的M＆E;但是，M＆E的内容和方法将根据程序或项目的目标而有所不同。为什么这是重要的？主要是因为在M＆E之间突击平衡的机会对于计划与项目心灵不同。项目经常在特定资金机会上设置并拆除，我常常比没有项目的次结构（这意味着专门的领导，计划和M＆E工作人员）。课程与资金来源无关的技术资产。通过方案方法获得的效率也会对M＆E平衡产生影响。

最后，当考虑HSS的M&E(特别是“E”)时，值得考虑的是，我们衡量的东西将对我们进行的活动产生影响。因此，如果我们在评估对健康结果的影响，我们衡量的结果类型将对HSS方法产生影响(这通常是我们想要避免的)。如果我们对评估对儿童生存的影响感兴趣，那么HSS干预自然会开始关注供应链、人力资源、HIS等与可能对儿童生存有影响的干预相关的方面。如果评价的重点是与艾滋病毒/艾滋病相关的死亡率，那么人类健康服务干预将开始自然地转向相关领域的供应链系统、数据收集系统等。

我波林Basinga，影响评估和业务研究实践者。我现在与盖茨基金会是在HIV部门的效率和效益单元。在过去的10年里，我一直任教于公共卫生学院卢旺达的国立大学。我将提供一个小组专家的意见是我自己的观点，并不一定反映我与下属机构的意见。
我非常高兴能参加本周的小组讨论，并期待着一次富有成果的讨论。
关于第一个问题，我认为同样重要的是，并不是所有的项目都需要一个影响评估“它工作了吗?”:该项目对特定的利益结果有什么影响?
但是，实施的所有方案都需要一个M＆E计划跟踪发生程序的内容并使用实时数据来告知计划实施和日常管理。
此外，当一个新的或现有项目的影响评价计划，详细的M＆E将嵌套到影响评估计划，以告知如何计划正在实施中。影响评估的解释将依赖的M＆E数据。
严格的影响评估将是非常昂贵的，需要时间和专业知识。它决定什么时候适合实施效果评估是很重要的。
Paul Gertler及其同事在一本书中没有标题“在实践中的影响评估”（参见下面的参考资料）提出了在进行影响评估之前考虑的钥匙问题：
1.正在实施的程序的股份是什么？该问题的答案将取决于所涉及的预算和人数，或者最终会受到计划的影响。因此，如果一个计划不需要很大的预算，不服务于许多人，这是不值得实施严格的影响评估，则定期监测该计划就足够了。
2.如果该计划的风险很高，那么第二个问题将是是否存在任何证据表明该计划在类似情况下也能发挥作用。如果没有证据存在，就值得考虑进行影响评估。
3.但是，如果有证据，影响评估只有在能够解决一个重要的新政策问题时才有理由。
作者列出了应评估的程序的键特性：创新，可复制，战略相关，未经测试的和有影响力。
影响评估的另一个用户是，当一个人对人口层面干预的有效性感兴趣，而不是没有计划时。这方面的一个很好的例子是乌干达、肯尼亚和南非在过去十年末实施的自愿医疗男性包皮环切术(VMMC)的影响评估。这些评价提供了关于人工受精在减少艾滋病毒传播方面的影响的证据，目前，人工受精正在非洲许多艾滋病毒流行率高的国家推广/扩大。男性包皮环切不需要进一步的影响评估，而是需要良好的监测，以确保项目按计划实施。

参考：Paul Gertler和同事题为“实践中的影响评估”，这本书在亚马逊提供，作为互动教科书http：//siteresources.worldbank.org/exthdoffice/resources/54857261295455628620 ...

我们在健康政策和创新中心采用了一种方法，我们认为卫生系统是由社会制定的一种手段，协助实现各种受访者提到的那些等端。卫生系统可以是用于加速与健康有关的目标进展的载体，但它们也可以成为限制的源泉，阻碍进展。卫生系统的表现可以被认为是卫生系统产生的结果 - 终结社会寻求实现。

与卫生系统分析相关的工作流更加强调性能测量和评估以及使用统计模型以使健康系统特征与性能相关联。在2000年世界健康报告中，“卫生系统：改善绩效”（2000年），他提出了一个具有三个广泛卫生系统目标的概念框架：健康状况，对人们非医疗期望的响应和公平的财务贡献。它还开发了特定的指标，以衡量这些成果和各个国家的国家绩效，以对每个结果的相对表现单独排名，并计算出所有结果的综合指数。该报告还涉及四项重大卫生系统职能 - 管理，资源创造，服务交付和融资以及批评有关这些领域政策的可用证据及其对卫生系统绩效的影响。

在随后的更详细的报告，卫生系统绩效评估：辩论，方法和经验主义（WHO 2003），WHO通过详细的量化在卫生系统中使用的输入方法，阐述了该方法的卫生系统绩效评估;使用特定的指标来评估卫生系统的四大功能表现;申请指标量化卫生系统（健康，快速响应，并在财政贡献的公平性）的三个目标;并详细推导卫生系统绩效骨料措施的方式。世卫组织还试图建立的政策干预，将所得结果之间的因果关系在卫生筹资领域。

此致，

Marco Gomes.

丽莎赫塞豪恩使一个伟大的点的集合 - 这里的核心问题是....让我们清楚地了解监测和评价之间的区别，并了解该项目的主要目的是否是改善数据系统

除非我们主要是着手改善数据系统(例如引进一项新技术)，或者我们完全控制与项目相关的数据系统，否则我们大多数人都试图解决这个问题……“我们能否使用我们项目所在的现实生活数据系统来准确监控项目?”除非你正在使用一个完全平行的数据收集系统，否则大多数卫生系统实施项目将需要一个可靠的地方数据系统来监测进展，在当地数据系统能够被用来监测项目干预的效果之前，往往需要对其本身进行大量的监测和评价。改善数据系统可以而且应该成为加强卫生系统的干预措施的一部分。

对于评估，我们可以结合使用可靠的本地数据系统以及外部数据收集系统来回答Lisa的问题“它是否有效”。

无论如何，对本地数据系统的投资是至关重要的。通常情况下，除非你专门测试一个新的、可扩展的数据系统，否则项目将不会处于(并且应该避免诱惑)引入新的或平行的数据系统的位置，因为新系统可能与卫生系统的其他数据结构不兼容，而且在项目结束后也很难维持下去。同时，也错失了加强现有体制的机会。

虽然令人兴奋的创新正在测试现有技术(例如手机)的创造性使用，但新技术的引入是有风险的，除非你能证明系统在资源、技术限制和环境能力的范围内是可伸缩的。从少数例子中可以学到很多东西(例如马拉维的猴面包树系统)http://baobabhealth.org/）如果在低资源设置中部署了非常简单的本地可维护系统。

皮埃尔·巴克

亲爱的小组成员,
谢谢你对第一个问题的最初想法!
当我们谈论时
平衡对评估的需求（“它是工作？”）随着需要监测的需求，我们也应该不会忘记评估应该在需要时出现在正确的时间！如果它在程序/项目过程中，如果程序/项目需要知道该程序/项目是否有效地走向正确的方向，则应进入，如果可以在地平线上预见到预期的结果，如果没有，评估应该告诉他们纠正或调整什么！因此，平衡对对监测需求进行评估的需求（尽管数据可用性讨论）也涉及从初名开始的良好实现编程，因为管理者应该知道即将到来的评估所需的主要数据，以便他们的监测计划应该准备他们为此！当它在程序/项目结束时，那么管理人员对他们所需要的东西更清楚的是！我不想进入数据标准
然而！

Bali Andriantsehenom＆E专门用于健康的专家（Ash）

在Balsama Andriantseheno的评论之后，我非常同意在规划阶段考虑项目评估的重要性。任何方案的监控都必须在方案实施之前进行规划，并为所有进入方案的投入、过程、方案的输出和结果制定明确的指标。监测将是一个持续的过程，将跟踪项目中发生的情况，提供实时数据，正如Balsama所说，监测结果将用于指导项目的实施和日常管理和决策。
评估部分将定期实施，以回答与项目实施和结果相关的具体问题。评估将是周期性的(例如，在计划开始之前就有一个基线)，应该使用一个客观的方法来回答明确的问题。
影响评估是一种评估形式，旨在回答与“该特定项目是否导致结果变化？”相关的问题。实施严格的影响评估最重要的挑战是确定一种情况，以便进行比较“如果计划没有实施，将会发生什么情况”，因此，如果想要进行影响评估，确定要使用的方法的重要性。
大多数时候，评估结果，即使不严格，对程序来说也是非常有价值的。
但是，如果实施良好，影响评估就能提供强有力和可信的证据，证明特定的计划是有效的。在卫生部长与财政部长(财政空间谈判)或其他捐助方谈判预算以确保方案的可持续性时，这一点非常重要。
结果还将通知其他有兴趣实施相同计划的人…。

首先，我像对待科学实验一样对待并购。如果我正在测试x对y增长的影响，在开始输入过程之前，除了准备好所有的输入并知道所有的输出，我还必须知道我正在收集什么数据以及收集的频率。我多久收集一次食物消费数据?我需要多长时间收集资料?我多久收集一次体重数据?我还需要开发我的表，并决定我将做什么分析。数据收集毕竟与练习的目标有关。

其次，所有的数据都不需要我们分析和报告，因为这取决于我们想要发现什么。例如，虽然我同意父母应该在他们的MCH卡上有他们孩子的所有数据，这些数据应该被分析并与他们讨论，但定期地只是绘制和分析一个随机样本来记录趋势难道不是同样有用的吗?还有，健康中心的健康访客必须自己做吗?让一个特别的人(像我这样的人)为一群健康中心或一个地区分析数据，难道不值得吗?我有一些想法。

总结从第1天（和道歉迟到！）和一些问题进行讨论成员
第1天出现了一些主题：
1.平衡监测和评估的挑战
讨论者同意监测，特别是评估在HSS中很重要，而且还提出了关于相对数据负担的重要观点和评估与监测的成本。正如肯尼谢尔特写的“数据通常通过常规信息系统更有可用，这更好地符合程序监测方法，以更低的成本更低，更及时的方式......许多组织正在努力为昂贵的评估或时间提供有限的资金资金的项目时间表。收集，分析和现有数据在适当的成果上，延伸超出项目范围 - （和）严格的评估难以做到，“。提出了一个重要的区别，提出了计划之间的差异（通过Moh和Nations Indope和Lenge和Henders and Henlete）的差异，与基于非政府组织和更短的术语，以及如何驱动M和E余额和资源所需的项目。计划可能较少能够个性化M和E，但由于规模和融入国家结构而产生的效率更高。项目的预算和时间表通常决定更加强调监测而不是更严格的评估（以及特别影响评估）。
由于计划和实施所需的资源通常比常规的短期监测更大，资助方也应认识到所需(或即使不需要也有价值!)评估的成本的重要性也被提了出来。
从预面板帖子评论相呼应，又如何评估和测量可在其中HSS发生影响重点警告。“如果我们评估对健康产生的影响，我们测量结果的类型都会对HSS方法的影响（而这也是我们想避免）”。
2.监测的作用和评估的作用
许多讨论者认为两者都有作用，但并不是所有的活动都需要深入的数据分析来进行广泛的(尤其是影响)评估。巴辛加博士写道:“我认为，同样重要的是要注意，并非所有项目都需要进行影响评估。严格的影响评估将是非常昂贵的，需要时间和专业知识。决定何时实施影响评估是很重要的。该项目对特定的利益结果有什么影响?，并提供了一个极好的资源，以提供进一步的信息和指导，由谁作出这一决定。这些因素包括项目的“利害关系”有多高，项目的关键特征(包括它是否具有创新性、可复制性、战略相关性、未经测试和有影响力)，以及是否需要了解人口影响。另一位讨论者强调了udnertswhy we do the M and the E and the timing。“所以平衡需要评估和监测的必要性(尽管数据可用性的讨论)也需要一个好的编程从开始实施经理应该知道可能即将到来的主要数据,他们需要评估,以便监测计划应该准备!当它在程序/项目结束时，那么管理人员对他们所需要的东西更清楚的是！
3.我们如何用较少衡量？
Barker博士专注于我们如何利用现有的数据，并相对强调引入新的数据系统，而不是利用现有的数据。“除非我们主要着手改善数据系统(例如引进一项新技术)，或者我们完全控制与项目相关的数据系统，否则我们大多数人都试图解决这个问题……“我们可以使用我们项目所在的当前现实生活数据系统来准确地监控项目吗? .....。大多数卫生系统实施项目都需要一个可靠的地方数据系统，以便能够监测进展情况，而且在利用地方数据系统监测项目干预的效果之前，往往需要特别注意监测和评价地方数据系统本身。改善数据系统可以而且应该成为加强卫生系统的干预措施的一部分。

对于评估，我们可以结合使用可靠的本地数据系统以及外部数据收集系统来回答Lisa的问题“它是否有效”。
4.什么是我们在HSS衡量？
虽然M和HSS电子是不在本文讨论的一个明确的目标，要记住，我们在加强这些系统讨论M和E的作用仍然重要。一位评论员描述卫生系统的“车辆加速与卫生相关的目标方面的进展，但也可能是制约的来源，阻碍进步”，因此选择什么来衡量（性能）应该侧重于测量“的健康产生的结果系统 - 两端社会寻求实现“。世界卫生组织卫生系统的分析“更为重视绩效测量和评估，并利用统计模型对联想卫生系统特性与性能”工作。重点包括管家，资源创建，提供服务和融资领域
专注于这些问题，我会要求讨论者分享与这些相关的经验，包括：
1.在加强数据系统以用于监测和贡献评估方面，它们如何与我们更多的“。
2.他们如何谈判m和e的余额
3.他们如何能确保评价的作用有利于卫生系统相关的程序（或项目），社区服务，以及更广泛的观众

企业并购的主要困难之一是缺乏真诚的系统广泛的支持。设计、实施、数据收集和评估需要从政策制定到数据收集的各个层面的支持。我相信我们所有人都同意对m&e的关键需求，并在一定程度上证明了这一领域缺乏普遍的支持/资金。平衡成功的需要和公正的评价常常是相当具有挑战性的。

除此之外，存在有效的M＆E的元素存在，并且如果彼此协同行动，则可以提供极其有用的目标信息。在一些早期帖子上触摸和扩展我可以看到几个必要的组件。
对公正的评价•系统级（包括可能的捐助者）的支持
•从项目规划阶段开始，用基于证据的度量标准定义现实的可衡量的目标。
•动态的机电设计，能够缓冲系统的广泛变化。这种设计在某种程度上应该根据地点进行定制，因为不存在地毯式设计，但是度量标准应该在更大的规模上具有可比性，以提供项目之间更大的功效视图。
•整合巧妙设计的技术，不仅收集相关数据，而且整合了个人只使用与他们相关的技术的理解。现在手机的普及程度证明了这一点(你不需要做什么来证明为什么使用手机是有益的)。我们需要找到类似的方法来证明并购和技术整合的合理性。
备份已经收集到的数据，并使用被动数据收集
•通过能力建设建立势头，并证明并购的真正需要和好处是正确的。
•通信（如这个非常面板）。有很多脱节的努力，以解决组织之间的相同的关切和重叠，如果经常被忽视。从政策制定者，捐助者，学者，卫生工作者等通信需要有效地向前推进。

为了跟进Lorna McPherson的优秀观点，我们一直在PIH各站点开展工作，试图平衡我们可以收集（或已经收集）的数据与我们应该关注的数据，以确保数据质量，并通过稳健的反馈回路支持使用。反馈回路提供了足够的数据，但不足以使测量成为目的而不是手段。我们已经召开了多学科会议，其中包括M和E、最终用户以及HMI（当包含电子数据时），通常从简单的逻辑模型开始，并从该模型开始创建指标列表，以及起草模拟报告，以便人们可以看到数据的样子（每月、每季度等）。另外一种方法是，从我们怀疑可能太多的东西开始，但测试一到两个月，看看哪些实际用于项目监控和改进（要么从差距中改进，要么庆祝成功），以及需要多少M和E资源（收集、清理、分析、，转换成可用的格式，如仪表板、报告、图表等）。我很想听听其他人是如何管理这次谈判的。。。

我认为我们所需要的是“M＆E为假人”，因为M＆E在前线工人的水平上没有清楚地理解它的重要性。在卫生系统的每个级别，我们需要清楚收集的数据，为什么和谁使用

我们都可以觉得你是强大的影响评估保罗基本倡议，所以我也是！但请允许我这么说：我遇到了许多人，他们不欣赏影响很大的影响，因为对他们来说是它的另一个工具销售“RCT”！我的问题是：除了RCT之外是否有其他方法进行严谨，即？当然的主要问题是当您必须在项目监测计划中处理太多的定性指标！

巴厘岛和里安特塞赫诺

我倾向于同意什么
洛娜·麦克弗森在下面说但我们不要忘记我们不应该就此止步
收集了哪些数据、为什么收集以及由谁使用”。我们还需要最终数据用户（分析师？决策者？）！如果这两个部分之间的对话不存在，那么数据提供方总是会觉得他们是在徒劳地工作，不知道他们是否做对了！只有这样的对话才能确保正确的数据（数量和质量）被收集并输入M&E系统！

巴厘岛和里安特塞赫诺

巴厘，谢谢你的交换，你说得很好。虽然我强烈支持使用随机对照试验(RCT)，当练习的目标是确定一个程序和结果之间的因果关系时，我也强烈建议只有当随机化不会危及程序的良好执行时才使用RCT。建议随机当随机化的实现和研究团队都同意将是最有效的方式确保公平、透明的程序利益分配,特别是当一个人正计划全国范围内的一个程序,想知道哪个地区/省/地区会先走,哪些会后。随机化可以为计划的分阶段制定提供一个合理的依据，同时也为以后的学习提供了机会。
但是回到你的问题上来，关于可以用来评估项目影响的其他方法，而不是RCT：当然还有其他方法，而不是RCT，可以用于项目评估。最常用的两种方法是前后比较，以及登记者与未登记者之间的比较。但是，这两种方法在提供信息时存在不同的偏见，从而危及因果关系。
好消息是，许多研究人员现在正在寻找使用现有监测数据和其他可用的人口水平数据(DHS, MICS，..)来模拟随机化的方法。你可以在这里找到一个很好的方法(平台)的描述:Victora CG等。衡量千年发展目标时代及其之后的影响:大规模有效性评估的新方法。柳叶刀。2011年1月1日;377(9759):85-95。2010年7月9日。
我很乐意与您分享我们试图使用常规收集的计划评估数据的经验。

并加入Balsama所说的，必须用来通知新一轮的规划

从M＆E的螺母和螺栓上踩回来一会儿我想知道是否有人可以在他们在评估下定义初始目标的经验中阐明一些光线。具体来说：

（1） 目标本身有多大的动态性？它们如何涵盖干预/项目的健康和社会方面？

（2）目标是否纯粹来自健康观点，并且在该规划阶段考虑了M＆E的频率？

（3） 根据最终接受者可能定义的成功干预/项目，他们考虑的目的是什么？这可能更符合定性信息，但对于理解个人层面的细微差别和影响非常有用。在数据收集方面，如果包括目标个人或社区最初定义的指标，则可能会有更大的M&E动力，与那些可能不了解硬数据相关性的人一起。尽管我觉得应该指出的是，目标社区或个人往往难以确定他们可能认为不存在的问题的解决方案的成功与否。

HMIS评估方法:
一种。了解HMIS评估的目标
湾了解HMIS评估的方法
了解评估申请的目的
天。使用评估来改善HMIS设计
我们如何评估HMIS？
需要对健康管理信息系统进行评估，以了解它是否有助于改善规划成果和健康影响这一更大的目标。这种评估有助于改进其设计和功能。
HMI对整体健康影响的贡献可以通过关于HMIS产出的四个问题来衡量：
•是系统捕捉最相关的信息？
•提供的信息在质量(完整性、一致性、准确性)和及时性方面是否可靠?
•信息是否足够方便用户，以支持行动-(易于获取，易于对方案经理进行解释)?
•有没有采取行动所提供的信息的能力？

我们如何建立内部能力和所有权，以进行M＆E活动？
这是我们在工作的所有阶段都需要考虑的一个基本问题，我认为可能有一些关键因素可以导致更有效、可持续和地方驱动的方法（包括M&E）。我想分两个部分来考虑这个问题：一是注重能力建设，二是建设地方所有权。

有效的能力建设与有效的培训方法开始，在M＆E I的面积已经发现，许多技术干部健康留下的数据和监测系统的了解甚少的岗前培训。这包括螺母和螺栓（如什么登记和报告是一线医务人员和地区经理的责任），以及如何使用的M＆E支持决策（发现问题，解决方案生成和测试）。配售的M＆E能力进入前在职培训是不容易的，因为与其他能力的竞争，也是因为这两种保健培训中心教员常常在监测和评估能力有限。所以，更多的工作需要在这方面做，这将是有趣的参与者在这个论坛上听到的话，他们可以找出改进的M＆E培训力度预在职培训的最佳实践？

认识到仅靠培训并不能建立可持续的能力，因此需要考虑采取措施，确保在培训后继续发展监测评估技能。这是我们国际卫生联盟在莫桑比克重点关注的一个领域，重点关注省、区和设施一级的能力，以加强与常规可用数据有关的数据系统和决策。为了加强数据质量，我们对设施样本进行了年度数据质量评估，并通过例行监督和持续的数据交叉检查来确定和解决可能的数据错误，重点关注数据质量。从我们迄今的工作中得到的一个教训是，必须注重各种各样的人员——使监测和评价人员和卫生系统管理人员(包括妇幼保健、疟疾、扩大免疫方案等技术领域的总体管理和管理)都参与进来。通过让所有工作人员参与评估和改善数据质量，并为来自卫生系统不同层次的广大卫生工作者建立日常习惯和规范，加强数据质量的责任得到广泛分享和维持。第二个教训是，持续的指导对于培训后技能的培养至关重要。

与提高数据质量的技能建设相联系的是利用数据进行决策的能力建设。我想在这里提出几点。第一，上述数据质量能力建设中所述的类似警告适用于确保M&E工作与决策相联系。在不同范围的卫生工作者中开展工作，并通过持续的指导建立信任关系，是培养能力的有效途径。将数据与决策联系起来的第二个策略是开发和应用简单的工具，帮助在迭代的基础上识别问题、生成解决方案和测试解决方案。例如，数据仪表盘和持续质量改进都是有助于将数据分解到设施/地区级别并查看长期趋势的方法。这两种方法都是把握工作脉搏的两个关键策略（即：确定哪里存在问题或事情进展顺利），然后开始一个超越数据的过程，以了解原因和下一步是什么。小组的一个问题：你能否谈谈将M&E与变更流程联系起来的经验（成功的和不太成功的）？也很高兴听到关于能够促进数据与决策联系的工具的经验。

现在才能建立所有权。我们许多人在更广泛的卫生系统内作为技术支持而非实施机构，并且有可能有助于建立所有权，因此有效和可持续的M＆E活动。首先，必须不在隔离工作，而是尽可能地集成到更广泛的系统中。例如，我们在莫桑比克（卫生联盟国际）的工作人员基于省卫生局办事处，而不是一个单独的项目办公室。通过与卫生经理并排工作，“项目人员”融入省级设备，并通过其活动与卫生系统经理分享的同一团队的一部分。这可能需要更多的时间来开展活动与更多的外围工作，卫生系统的方法相比，但最终活动将能够实现更大规模和更可持续发展的可能性比如果在相对孤立进行。第二种方法是思考大。卫生系统很大（并且经常笨拙），很好地开始小。但是，实现达到规模的目标，并从一开始就将其建立进入活动的设计，将促进卫生系统的所有权，最终实现规模。最后，全身思考。 To build ownership in M&E we need to work across multiple program areas and functional units of the health system. Focusing on M&E for one disease specific area, for example, will not build up the entire M&E system, and as a result will lead to fragmented capacity (with potentially distortive and less sustainable results). There is a balance to achieve here, and this balance requires compromise (such as not including all the indicators that may be seen as essential to some, but not to everyone), but the end product will be more sustainable. Depending on the structure of the health system, ensuring ownership may include engaging potentially non-traditional units (such as planning and cooperation, which in the case of Mozambique is where the HIS is based), but working with a broader group of stakeholders is essential.

我想回应肯尼的积分。从全球基金的角度来看，捐助机构随着自己的监测和评估工具包，要求拨款相关指标被监测为国家Mande努力的一部分，我想指出以下几点：1）仍有有限的限制在决策者之间了解或所有权的有意义的曼德权;2）Mande努力通常被隔离并被视为一个科学分开;3）捐助机构倾向于建立自己的Mande框架，这些框架并不一定与国家一级主流纳入其健康相关的数据分析。对于这些问题的解决方案，我完全同意肯尼的积分。我们需要使Mande简单，可以理解所有和分析战略决策。捐助机构必须与国家实体携手合作，并在国家一级加强曼德邦的努力。

问候

桑德拉伊贝
基金投资组合经理，东欧和中亚团队，全球基金
（从便携式设备发送的消息）

因此，随访后，我对参与者的请求是分享有效实施更简单的模型的任何示例？是否有工具已经有用，您可以在确保数据质量或使用中与利益相关者进行谈判“较少是更加”的方法？

我想简短地回复一下Morgan和Sandhya的帖子。
摩根提出了关于定义评估目标的问题。听取有关评估范围的参与者，特别是卫生系统与健康影响措施的非健康系统决定簇之间的相互作用将会有趣。我知道我们争取这个问题，特别是在展示有许多卫生系统的额外卫生系统决定因素的健康状况时，我们不会通过我们的卫生系统的融合干预措施来展示健康状况的改善。摩根还要求在评估中询问参与利益相关者，在我的经验中，这是一个综合评估的常见和必要的组成部分。我认为，我们可以量化的局限性理解，混合方法方法是提出从根本上重要问题的重要意义（例如如何/为什么干预工作/不起作用;以及干预的核心组成部分是什么？这可以广泛化到其他地理或干预领域）。
桑德亚提出的为什么和怎样，我们应该评估HMIS点。一般来说HMIS被视为达到目的的手段，评估和改进经常HMIS侧重于这些系统如何提供数据少等被使用的数据的后续如何相，什么可以做，以提高数据的利用率。桑德亚指出容量使用数据，并考虑如何包装HMIS输出，以提高数据的利用率，在评估HMIS要考虑两个问题。
I would like to follow up on these two points (how to package data to facilitate data utilization and how to build capacity for data utilization) and a question raised by K. Amico early on in this panel—‘how M&E can be used on the small scale – individual clinics versus networks of clinics’ and pose a question for the group. I’d be interested in hearing from participants about successful approaches to improve data consumption at different levels of the health system – facilities, networks of facilities, and administrative units (from district up to national). What has worked at small scale? What has worked at large scale? What worked at a pilot level (with intensive resource inputs) but failed to achieve scale? What was scaled up and sustained effectively?

一些关键主题和一些问题
在过去的2天看，一些主题通过，但同样重要，一些问题

1.当需要RCT时，战略决定何时进行影响评估的重要性（并且重要的是，当他们不可行时）
2.收集到的数据可以用于不同的目的——“并不是所有收集到的数据都需要分析”，但要意识到单个服务所需的详细数据水平并不意味着需要对M和E项目进行分析
3.关键组件，包括定义现实可测量的目标和指标;利用现有数据，能力建设和确保M和E的理解好处，
4.需要的工具和工作教导M和E至一线工人（可行的，负担得起的）;预在职培训和后期服务的作用
一种。包括例如HAI“通过常规监督和关于数据质量的耦合年度数据质量评估跨越的设施将样品与一个焦点正在进行的交叉检查数据以识别并解决可能的数据错误;并且它必须集中于一个多元化的人才”
b.需要包括利用数据进行决策的能力建设
5.建立所有权的重要性（也与支持数据理解和使用相关联），其中包括使M和E简单，可以理解的所有和分析战略决策的必要性
6.数据人员和前线提供商之间更好地对话如何更有用
7.健康管理信息系统作为管理和E手段的重要性，以及对健康管理信息系统进行管理和E的必要性

一些基于过去几天的问题，希望能从讨论者那里听到，包括:
1.什么是成功的设计和实施简单，但有效的监测和E的例子吗？
2.是否有工具已经有用，您可以在确保数据质量或使用中与利益相关者进行谈判“更少是更”的方法。
3.是否有项目成功地开展了与HAI类似的工作，为项目改进和建设所有权建设数据使用能力
4.您如何确保数据接收者被视为成功的干预/项目？

我们还可以考虑数据需求和信息使用。我们必须改善数据的使用来加强我们的计划。我们有许多系统和信息来源（HMI，RTT，DHS，..）。这些系统通常存在于具有高度分散的规划和服务交付结构的国家，我们需要为基于证据的决定引入数据需求和信息用途。



itete karagire
C/O: CCM/Global Fund

我想就数据系统投资、数据利用以及数据如何有助于提高护理和服务的质量发表几点看法。
Pierre Baker对投资本地数据系统提出了一个关键观点。这是加强机电一体化的重要组成部分。我必须承认，在海地的总统防治艾滋病紧急救援计划是一个助推器，鼓励卫生伙伴、ITECH和GHESKIO三个主要合作伙伴改进其数据系统，以提供可靠、准确和有意义的信息。
PEPFAR还speehead其数据将被用来提高质量的又一创举，如果护理（HIVQUAL现在HEALTHQUAL）

Zanmi Lasante是健康伙伴最大的姐妹举行这项倡议。
在此之前，我们主要根据捐赠者和卫生部的要求将数据用于项目报告。
在过去的4年中HIVQUAL倡议（QI方法）的组织移向一个更实际的方法范式使用我们的方案评价活动产生的数据，以解决整个系统提供护理的质量鉴定的空白。使用一组10个指标看，可能促进或危及我们成功的人，我们的发球让我们的网站，我们关注艾滋病毒的整体性能表现出的工作人员提供标准化，高质量的艾滋病毒服务的关键因素方案，并同时提供正面和负面的反馈。使用电话，电子邮件，现场考察和每月的所有站点会议期间提供的反馈。
这项计划LED员工朝着不同的行为来处理他们必须提交的数据。工作人员明确说，他们不仅要注意他们正在制作的数据质量，还要注意数据显示它们正在提供的护理质量。
其他举措，充分利用跨ZL网站数据的利用率是PIH交叉点指标和正在实施的QI活动和进一步强调有可靠的数据来衡量在不同地区表现的重要性，以更好地欣赏总体印象，在ZL我们已经建立制度，使我们能够提供护理的质量水平，我们的目标是提供给人们谁需要。
通过所有新举措，我们能够仔细研究我们的计划/项目，并确定需要解决的弱点，以便更好地加强和维持我们的工作。
通过QI活动，我们希望让员工了解为了改善服务质量，对他们的工作进行测量/评估是多么重要。监测评估活动已经到位，以支持这一工作。
问题仍然是如何维持的增发方案，面对一个高层次的动机的数据和其他竞争要求按比例分配？

我要感谢大家对专家小组的梦幻般的贡献至今 - 我们很高兴能在这里看到这么丰富的讨论正在进行。

虽然我们将继续讨论在本次讨论开始时概述的一些关键问题，但我想邀请社区中的每个人在接下来的两天里与我们的小组成员分享他们自己的问题。请让我们知道，当涉及到将机电一体化到您的项目中时，您曾面临或正面临哪些挑战。我们也渴望听到成功的故事，希望你能分享你认为特别有效的策略。

再次感谢大家参加这次专家小组讨论，我们期待着听到你们的问题！

我发现所有参与者的输入和评论非常有用。与分享和讨论的领域有这么多相关主题和经验。我还有一个额外的涉及在当地设施层面持续监测和评估的重要性，以贡献。
在参与管理和为非洲卫生项目提供技术支持的近十年中，医疗保健提供者(和支持人员)过度工作和无法完成任务的慢性问题一直存在(现在仍然存在)。这在监测和评价部门也可以看到，并影响了数据收集、分析和决策使用。解决这一问题的措施之一是确保数据易于在地方卫生设施一级生成和分析。同样重要的是，要确保将相同的数据提供给系统的更高级别(地区、区域和国家)。
为了支持更容易的数据收集和处理，将开发有助于捕获地方设施一级核心质量护理指标的简单和用户友好的电子工具。这些工具满足监控的基本设施需求，帮助进行持续评估，并解决所有权问题。能够轻松地输入数据并以可视化的形式自动看到结果，可以帮助监测和评估人员和管理人员注意到实际项目实施阶段的趋势并建议更改。这些工具还可以提供数据整合，并将数据提供给更高层次，以进行相关决策和政策制定。

HSS，天主教救济服务高级技术顾问奥兰莫里纳博士

刺参博士提高非常有效点“为了支持更简便的数据采集和处理简单的和用户友好的电子工具，在当地工厂级帮助捕获核心优质护理服务指标均有待开发。”该建议的方法已经发生在发达国家自70年代中期，在少数发展中国家，如牙买加自1997年以来，当它在病人接触点编辑的数据质量是远远优于，数据能瞬间分配给那些需要知道的。使用该工具被称为PAS（病人管理系统）和电子方式的成本远远低于使用手动纸张为基础的系统的方法。我介绍了在这个论坛这个早期（分＃21和＃24），以及更低的成本此事是由奥斯曼·拉扎巴基斯坦证实，现在与全球基金（点＃23）。希望这个有趣的论坛，所有的读者将很快从数据收集古老的手工纸为基础的办法搬开 - 健康的改善，以及经济 - 在各自的国家。

罗恩有一个很棒的观点。全球收集的数字数据的金额和质量以惊人的速度增加。即使除了采访者和医疗保健人员使用电子设备的使用，也将以比健康分裂更快的速度关闭数字分裂的掌上电脑移动设备的爆炸。在未来几年内，将迅速增加利用个人人员电子设备（占据所有隐私和道德考虑）来帮助衡量健康计划的利用率和有效性。如果有人调查了这一数字监测结束，我会好奇。

我想分享一个通常发生在大型捐赠者项目中的常见案例。在过去二十年中，捐助者倾向于设计大型项目，并将其实施分为多个实施机构。在他们的计划设计提案中，写下并商定了一份良好的计划监控大纲！但说到执行机构，这些人每个人都有自己的“M&E文化”和实践，这在大多数情况下会导致与执行机构一样多的M&E系统！问题是，当捐赠者想要对他们的成就进行概述时，在大多数情况下，这些成就看起来是支离破碎的，几乎没有连续性，而且作品之间也没有明确的联系！怎么办？我们在马达加斯加为美国国际开发署（USAID）进行的一次盘点中对此进行了试验，我们提出的主要建议是：-项目M&E系统必须首先在自上而下的过程中建立，而不是相反-必须有一个
强捐赠者之间的互动过程和实施机构双方建立一个迭代过程和实施机构之间为了让每个人都要清楚的重要性之间的必要联系各自的目标和项目的总体目标和目标。
关于这个问题的任何想法和经验？

巴厘岛和里安特塞赫诺

非常感谢参加这次伟大讨论的小组成员和贡献者。
我想知道是否有人有机电评估的经验在评估LMIC手术项目的安全性和质量。作为一个外科和麻醉护理的协作能力建设小组，我们一直在努力寻找可靠的、可持续的基准和QI/QA模式。目标是实施有效的工具，以持续的方式衡量最相关和最重要的手术质量指标，并随后定期向LMIC的宿主站点提供基准数据。

很抱歉这么晚才参加这个精彩的讨论。提出了非常有趣和重要的观点。我只想强调几点，并分享我在莫桑比克使用的模型的经验，该模型用于评估卫生系统（基线），然后实施具体项目（持续监测），然后进行总体评估。

我只想突出数据收集在某些设置中的挑战，并呼应大多数已经进行的评论。这表示，在卫生系统的不同级别收集了这么多的常规数据，应该看出如何用于M＆E目的的数据和过程。如果需要为特定项目收集特定数据，应该看出它应该如何在日常数据收集过程中集成，而不会在可能使用exisitnc基础架构中的“业务”中的“业务”中的过度中断。

此外，很多数据经常被收集，但不用于决策或任何其他目的，除了数据收集。我们需要使用数据，强调数据的重要性，让人们明白为什么要收集数据。同时，人们需要接受数据分析和使用数据改进工作的培训。监测和评估不应被视为项目的外部事物，而应视为项目的组成部分。

至于这种数据收集存在，应该看到这是如何作为基准。

我不能同意评论54.关于发表评论62，我想在莫桑比克分享我的经验，在那里我初步补偿了卫生系统REF1
使用卫生系统评估工具REF2。在此具体干预措施之后，设计了一致的监控.REF3和REF4。最后，进行了使用相同工具的整体评估，并确定了成功和失败的区域.ref5

这样做的是，使用标准化工具的初步评估允许了解问题，如何解决和基线。这也有助于建立可在M＆E中使用的一些指标。最重要的是，随着项目的制定和实施，这种M＆E的过程允许学习经验教训。通过明确而不同的指标允许评估不同领域的进展，并看到事物与预期没有那么成功的地方。

感谢大家为了如此有趣的讨论，我希望我们能够继续。感谢Ghdonline。

非常感谢所有持续讨论。回应Tony Roche Re：M＆E评估LMIC手术计划中的安全和质量，特别是与“协同能力建设集团”相关。测量能力建设是我认为仍然需要新的和相关指标的区域。我们正在努力使用Kirkpatricks模型来衡量培训和支持的影响，以便使用培训评估，但在3级（他们正在做教学的情况），甚至4级（患者做得更好），以及来自系统透视9如果我们在一个程序中训练，它仍然在6个月或一年内完成（并且正在良好）。在特定的绩效措施方面，我们的绩效更加集中于我们可以更简单地衡量作为常规（一些来自手术清单）的东西，但对其他群体如何完成这一点感兴趣。观察？手术结果？

非常感谢你这个优秀的讨论,一个问题类似于罗氏的问题是关于如何continuouse猴E在公共场合初级卫生保健设置,为员工提供这不是强制性的跟随你的指示,你基于“增大化现实”技术顾问为他们从某个非政府组织,非政府组织的员工:我们拿到的数据呢，是谁的?我们能在多大程度上利用它?

过帐伯大尼HEDT-A的参考上更具战略性的方法来测量使用与马拉维国家艾滋病毒程序，它需要较少的资源比全程监控，因此可能会留下更多的改进的时间内完成LQAS数据质量
-http://www.who.int/bulletin/volumes/86/4/07-044685/en/index.html.

我想在梅萨的约从没有隐含的任务在此设置管理服务代理机构的角度来看制度化的M＆E在初级医疗环境问题发表意见（即：作为一个非政府组织的员工）。梅萨指出，这是在公共部门的卫生系统没有强制要求卫生工作者响应已资助支持M＆E活动的非政府组织。虽然这可能是真实的，我想我们大多数人会认为它是（或应该）强制要求卫生工作者在卫生设施，管理，研究，政策（基本上每个人）要注意自己的数据，并使用这些数据作为一个起点改善（和测量的改进）在服务交付。

作为一个非政府组织的一部分工作，以支持各地的数据消费和使用习惯的建立，我相信，让什么有效和可持续的办法，一个是不太有效（或有效，但不可持续的）往往可以归结为之间的差异非政府组织和它们支撑所述设备之间的接口。非政府组织工作，虚心并与公共部门真正的合作将会有与该部门建立连续的M＆E更大的成功。这是什么意思为“协同工作”？在我的脑海里合作归结为建立一个结构，思维和做法，导致共同的目标和宗旨。认识和尝试，并尽量减少资源的差距，在满足公共部门，联合计划人员的需要表现出灵活性，并且是透明的（仅举几例）。

Maysa还提出了有关数据所有权的问题以及数据可以使用的程度？如果对M＆E活动的支持真正协作，那么数据所有权和使用的问题会变得更少相关。Though the public sector will always ‘own’ the data, if the project is truly integrated into the primary health care system, then the decisions about ‘who’ can use data and ‘for what’ can be discussed and decided on jointly by the public sector and NGO management team. But the first step is to build up trust between the two groups, which takes time, dedication, and commitment.

我的评论是为了呼应肯尼Sherr响应梅萨“是关于在初级保健制度化的M＆E问题，我想补充一点，它是在非政府组织中以及在公共部门工作的兴趣，使加强监测和评估公共部门的一部分他们的干预行动。通常情况下，我们往往从科研，政策等公共设施使用这些数据和信息。
大多数如果不是全部非政府组织计划旨在为公众服务，而目标人口总是相同的。M7E不应与临床干预措施分开，因为质量良好的数据将有助于改善公众的护理和服务。
海地卫生经验的合作伙伴的合作工作的一个很好的例子，双数据所有权。所有干预措施都是为以下MOH战略和运营计划提供的。事实上，非政府组织员工包括M＆E工作人员在合作精神中努力为捐助者的集中计划和初级保健产生良好的数据质量。

同意伙伴关系，信任和参与建立在计划的规划阶段。

我完全同意摩根关于最终受益者参与评估过程中的参与。评估过程的最大组成部分似乎在评估期间错过了。但是，在整个评估过程中，将项目收益的成功完成是调理到其在整个评估过程中的参与，从设计到实施和M＆E。这将有助于将该项目采用本地背景并在最终用户之间创建所有权。因此，该项目将得到很好的实施，最终实现其目标和影响。

亲爱的主持人，我非常同意这个监控和评估过程。我对那些听取并尊重这一点的人的评价有些困惑。如果任何事情都是在基层找到不好比建议关闭但当什么火花,它需要继续更多的可持续性或更好的理解社会比听这个,因为它不是在受益人的手。

有谁听呢?这是为谁作的呢?

关于行为或态度问题的监控以及产品的监控，哪些类型的指标将判断或激发正确的方式和方向。？

最后，我们希望从这一切中得到什么，我们正在努力建设谁的能力，我们期望在社会中看到什么样的影响，以及最终将如何判断对人民和社会的影响。

shahidul haque

在我们即将结束这场关于M&E的有趣辩论之际，我要感谢所有参与这一非常丰富的交流的人。在过去的日子里，我学到了很多。
我想评论上周广泛讨论的一点，这一人也由Shahidul Haque提出：能力建设。我们都同意，当处于M＆E活动前面的健康专业人士时，应该是第一个了解为什么这些活动对日常工作很重要。因此，能力建设提供设计M＆E计划所需的知识和技能，实现，维护，确保质量，并分析来自M＆E的数据至关重要。我也相信我们可以确保卫生专业人员能够授权进入其日常数据时，可以确保强大而可持续的M＆E活动，分析Excel（或任何其他统计包）中的数据，并检测通过对其程序的适应来解决的差距。
我想通过卫生部，卢旺达国立大学和在卢旺达工作的不同发展伙伴和大学之间的公共卫生学院的合作分享卢旺达实施的一些能力建设的例子。
卫生部已经实施了trace -net系统，这是一个电子监测和评价系统，仅在国家一级从抗逆转录病毒治疗服务(后来增加了预防服务)获取数据。在Voxiva的支持下，SPH为使用该系统的机电人员开发并实施了培训课程。由于大多数国家一级的监测和评价工作人员都在SPH攻读公共卫生硕士学位，他们中的大多数人都掌握了数据分析技能，并将日常工作中的数据用于最后一年的论文。的学术委员会主任允许学生们做二次分析的数据集收集的一部分,他们的工作与合作伙伴或卫生部,我们看到了增加的利益机电人员聚焦在数据分析和跟进建议从他们的实现分析。
多丽丝·杜克斯基金会、卫生部、卫生合作伙伴(哈佛大学布里格姆和妇女医院)和公共卫生学院最近提供的一笔赠款为能力建设提供了巨大的机会。这是一笔为期5年的赠款，旨在在卢旺达的两个地区实施和评估具有挑战性的创新卫生加强活动。在卫生部长就这笔赠款进行谈判时，她坚持认为，地区卫生官员从这笔赠款中受益，并接受了正式培训。卢旺达公共卫生学院在哈佛大学的支持下，利用项目产生的数据，开始为参与赠款的官员提供正式的理学硕士和博士培训。这加强了数据的质量和参与项目的学生的归属感。
卫生部、国家和国际非政府组织和地方学术机构在能力建设方面的合作还有其他例子吗?

亲爱的玛丽;

非常友善地将其分享到社区成员之间的生殖讨论。虽然我的意见可能无法提供所有答案或正确的答案，就像在M中的那些符合人类的那样，请允许我与社区分享有关此事的一些想法。

M和E是项目和项目成功实施的核心。获得预期的结果。根据Stephen R. Covey的说法，
“人们和他们的管理者都在如此努力地工作，以确保事情做得正确，以至于他们几乎没有时间来决定自己在做正确的事情。”
在这方面，为了能够平衡是否正确完成，我们正在做正确的THNG，我们必须将单一到评价分享两个术语，虽然在背景中是相似的。更多Vover，必须考虑一些事情。
1.我们想要进行什么样的评估。
2.我们想要评估什么。是进度、活动的实施、项目的成本效益、成效、影响或可持续发展模式/机制

这是一个非常血清的Challege，适用于资源糟糕的Settins中的大多数项目和节目。资助机构渴望看到一个精心制作的M和E框架，但最常见于总BEGET的基金在不存在支持活动中。鉴于此，为了进行有效的M和E作为卫生系统的关键组成部分，必须通过资金支持框架。

如果在针对计划活动达到的情况下，可以衡量成功和有效的评估;如果使用的方法为所采用的方法的可靠性增加了处理的值;它是否会允许提供明智的决定的信息，并且它必须为未来规划提供课程。

任何过程都有挑战，监测和评估也是如此。
1.收集数据的工作人员可能没有接受足够的培训，如果还雇用当地工作人员协助这一过程。
2。M和E是耗时
3.活动是昂贵和组织往往不具备足够的资金来进行这项活动。大多数往往不是最对项目进行的评价是由谁支付巨款外部staff-顾问进行
4.人们通常所产生的报告，该报告是oten项目失败等的报告往往不是读关键抱幻想

为了建设工作人员的内部能力，有必要为国家工作人员提供正规和非正式的母婴培训，作为加强卫生系统的一种方式。虽然邀请外部评价员以提高透明度或证明捐助者的规章/政策是很重要的，但进行定期的内部评价以便追踪限制因素并寻求迅速和适当的干预则更为重要。