Evidence summaries tailored to health policy-makers in low- and middle-income countries Translated title: Synthèses de preuves adaptées aux décideurs de la santé dans les pays à revenu faible ou intermédiaire Translated title: Resúmenes de datos diseñados para los responsables políticos sanitarios de los países de ingresos medios y bajos

Abstract

OBJECTIVE: To describe how the SUPPORT collaboration developed a short summary format for presenting the results of systematic reviews to policy-makers in low- and middle-income countries (LMICs). METHODS: We carried out 21 user tests in six countries to explore users' experiences with the summary format. We modified the summaries based on the results and checked our conclusions through 13 follow-up interviews. To solve the problems uncovered by the user testing, we also obtained advisory group feedback and conducted working group workshops. FINDINGS: Policy-makers liked a graded entry format (i.e. short summary with key messages up front). They particularly valued the section on the relevance of the summaries for LMICs, which compensated for the lack of locally-relevant detail in the original review. Some struggled to understand the text and numbers. Three issues made redesigning the summaries particularly challenging: (i) participants had a poor understanding of what a systematic review was; (ii) they expected information not found in the systematic reviews and (iii) they wanted shorter, clearer summaries. Solutions included adding information to help understand the nature of a systematic review, adding more references and making the content clearer and the document quicker to scan. CONCLUSION: Presenting evidence from systematic reviews to policy-makers in LMICs in the form of short summaries can render the information easier to assimilate and more useful, but summaries must be clear and easy to read or scan quickly. They should also explain the nature of the information provided by systematic reviews and its relevance for policy decisions.

Translated abstract

OBJECTIF: Décrire la façon dont la collaboration SUPPORT a développé un format synthétique permettant de présenter les résultats d'évaluations systématiques aux décideurs de la santé dans les pays à revenu faible ou intermédiaire. MÉTHODES: Nous avons réalisé 21 tests utilisateur dans six pays afin d'étudier l'expérimentation du format synthétique par les utilisateurs. Nous avons modifié les synthèses en fonction des résultats et vérifié nos conclusions par le biais de 13 entretiens de suivi. Afin de résoudre les problèmes dont les tests utilisateur ne traitaient pas, nous avons également recueilli les commentaires du groupe consultatif et organisé des ateliers de groupe de travail. RÉSULTATS: Les responsables appréciaient le format d'entrée progressive (par ex. une synthèse courte introduite par des messages clés). Ils avaient une préférence notable pour la section dédiée à l'importance des synthèses pour les PRFI car elle compensait l'absence de détails locaux essentiels de l'évaluation d'origine. Certains ont eu du mal à saisir le texte et les chiffres. Trois problèmes ont fait de la reconception des synthèses une véritable gageure : (i) les participants avaient une compréhension médiocre de l'évaluation systémique; (ii) ils attendaient des informations que les évaluations systématiques ne contenaient pas et (iii) ils souhaitaient des synthèses plus courtes et plus précises. Les solutions comprenaient l'ajout d'informations afin de mieux saisir la nature d'une évaluation systématique, un surcroît de références, la rédaction d'un contenu plus clair ainsi qu'une analyse plus rapide du document. CONCLUSION: La présentation d'éléments de preuve provenant d'évaluations systématiques aux responsables de la santé dans les pays à revenu faible ou intermédiaire sous forme de brèves synthèses peut faciliter l'assimilation des informations et les rendre plus utiles, mais ces synthèses doivent être claires, faciles à lire ou rapidement analysables. Elles doivent également expliquer la nature des informations fournies par les évaluations systématiques et leur pertinence en matière de décision de politiques.

Translated abstract

OBJETIVO: Describir cómo la colaboración SUPPORT ha desarrollado un formato de resumen breve que presenta los resultados de las revisiones sistemáticas para los responsables políticos en los países de ingresos medios y bajos (PIMB). MÉTODOS: Hemos llevado a cabo 21 pruebas de usuario en seis países distintos, con el fin de conocer las experiencias de los usuarios con este formato de resumen. Hemos modificado los resúmenes en función de los resultados y hemos comprobado nuestras conclusiones mediante 13 entrevistas de seguimiento. Con el fin de solucionar los problemas que las pruebas de usuario evidenciaron, hemos consultado la opinión de un grupo de asesores y hemos llevado a cabo talleres de grupos de trabajo. RESULTADOS: A los responsables políticos les gustó el formato de entradas clasificadas (es decir, un resumen breve con los mensajes clave al principio). Valoraron positivamente el apartado sobre la importancia de los resúmenes para los PIMB, que compensaba la falta de información más detallada con interés local en la revisión original. A algunos les costó trabajo entender el texto y los números. La reestructuración de los resúmenes resultó especialmente compleja por tres cuestiones en particular: (a) los participantes contaban con escasos conocimientos sobre lo que era una revisión sistemática; (b) esperaban disponer de información que no se incluye en las revisiones sistemáticas y (c) preferían resúmenes más cortos y claros. Entre las posibles soluciones se encontraban la de añadir información para ayudar a entender el concepto de revisión sistemática, añadir más referencias y hacer que el contenido resultara más claro y que el documento pudiera escanearse más rápido. CONCLUSIÓN: La presentación de los datos extraídos de las revisiones sistemáticas a los responsables sanitarios de los PIMB en forma de resúmenes breves puede contribuir a que la información resulte más fácil de asimilar y más útil, si bien los resúmenes deben ser claros, así como fáciles y rápidos de leer. También deben explicar la naturaleza de la información que se facilita en las revisiones sistemáticas y su relevancia para la toma de decisiones sobre políticas sanitarias.