Experience Generating Evaluation and Monitoring Strategies in the Implementation of Clinical Practice Guidelines in Spain.

  • Esther González-María Unidad de investigación en cuidados y servicios de salud (Investén-isciii), Centro de Investigación Biomédica en Red Fragilidad y Envejecimiento Saludable (CIBERFES), Instituto de Salud Carlos III. Madrid, España https://orcid.org/0000-0002-0212-1872
  • Daniel Muñoz-Jiménez Área Funcional de Procesos, Investigación, Innovación y Sistemas de Información del Hospital Clínico San Carlos, Equipo de Implantación del Programa de Centros Comprometidos con la Excelencia en Cuidados, co-IP del Grupo de Investigación en Cuidados del Instituto de Investigación Sanitaria San Carlos (IdISSC), Facultad de Enfermería y Fisioterapia Salus Infirmorum, Universidad Pontificia de Salamanca. Unidad de investigación en cuidados y servicios de salud (Investénisciii). Red de Investigación en Cronicidad, Atención Primaria y Prevención y Promoción de la Salud (RICAPPS). Madrid, España. https://orcid.org/0000-0003-4415-141X
  • María Pilar Córcoles-Jiménez Área de Investigación y Formación continuada de la Gerencia de Atención Integrada de Albacete, Programa de Centros Comprometidos con la Excelencia en Cuidados. Albacete, España https://orcid.org/0000-0001-5762-6627
  • Laura Albornos-Muñoz , Unidad de investigación en cuidados y servicios de salud (Investén-isciii), Red de Investigación en Cronicidad, Atención Primaria y Prevención y Promoción de la Salud (RICAPPS), Instituto de Salud Carlos III. Madrid, España. https://orcid.org/0000-0001-5875-8728
  • Ana Isabel Alcañiz-Mesas Gerencia de Atención Integrada de Albacete, Programa Centros Comprometidos con la Excelencia en Cuidados. Albacete, España. https://orcid.org/0000-0002-2654-8897
  • Ismael Ortuño-Soriano Departamento de Enfermería, Facultad de Enfermería, Fisioterapia y Podología, Universidad Complutense de Madrid, Grupo de Investigación en Cuidados del Instituto de Investigación Sanitaria San Carlos (IdISSC). Madrid, España. https://orcid.org/0000-0001-5651-8376
  • Encarnación Fernández-del Palacio Hospital Clínico San Carlos, Equipo de Implantación del Programa de Centros Comprometidos con la Excelencia en Cuidados, Grupo de Investigación en Cuidados del Instituto de Investigación Sanitaria San Carlos (IdISSC). Madrid, España. https://orcid.org/0000-0002-3172-9385
  • María Victoria Ruiz-García Gerencia de Atención Integrada de Albacete. Programa Centros Comprometidos con la Excelencia en Cuidados. Albacete, España. https://orcid.org/0000-0001-9706-6978
  • María Teresa Moreno-Casbas Unidad de investigación en cuidados y servicios de salud (Investénisciii), Centro de Investigación Biomédica en Red Fragilidad y Envejecimiento Saludable (CIBERFES), Instituto de Salud Carlos III. Madrid, España https://orcid.org/0000-0001-9061-4628
Keywords: Implementation Science, Evidence-Based Practice, Outcome Assessment, Health Care, Health Care Evaluation Mechanisms, Quality Indicators, Health Care

Abstract

Introduction. Monitoring the usage of knowledge and evaluating results permits one to know the application of the evidence, knowledge, and attitude changes, the impact on health results, integration, and maintenance of the adopted practices. There exist weaknesses related to lack of systematization, limitation of the records, and quality of the process. This article’s objective is to describe the experience generating monitoring strategies and evaluation of the results regarding the implementation of good practice guides in Spain. Topics for Reflection. In the first place, the measurement process of the results regarding the implementation of guides are reviewed, in the Best Practice Spotlight Organizations® program frame, whose tool to lead the change includes monitoring and evaluation as one of the sixth phases of the action cycle. In the second place, monitoring and evaluation strategies proposed in the literature are analyzed, highlighting the Professional Nurses Association of Ontario. Finally, the monitoring and evaluation strategies are analyzed by two Spanish institutions participating in the program, focused on the adequation of records, exploitation and indicator analysis, tools development, evaluation procedures, dissemination, and feedback mechanisms. Conclusions: The definition of monitoring and evaluation strategies planned in advance contributes to the viability of the evaluation regarding the implementation and its sustainability. Is necessary to adapt them to the context, with transversal strategies that reach the whole institution, facilitated by the institution.

References

Albornos-Muñoz L, González-María E, Moreno-Casbas T. Implantación de guías de buenas prácticas en España. Programa de centros comprometidos con la excelencia de cuidados. MedUNAB [Internet]. 2015;17(3):163-9. Doi: https://doi.org/10.29375/01237047.2383

Cannaby AM, Gkantaras I, Finn A, Foreman B, Butler G, Topping A, et al. Implementing a nursing systems framework in a developing country. Int Nurs Rev [Internet]. 2017;64(3):345-52. doi: https://doi.org/10.1111/inr.12380

Kronick R. AHRQ's Role in Improving Quality, Safety, and Health System Performance. Public Health Rep [Internet]. 2016;131(2):229-32. doi: https://doi.org/10.1177/003335491613100205

Registered Nurses' Association of Ontario (RNAO). Leading change toolkit. [Internet]. 2023. Recuperado a partir de: https://rnao.ca/leading-change-toolkit

VanDeVelde-Coke S, Doran D, Grinspun D, Hayes L, Boal AS, Velji K, et al. Measuring outcomes of nursing care, improving the health of Canadians: NNQR (C), C-HOBIC and NQuiRE. Nurs Leadersh (Tor Ont) [Internet]. 2012;25(2):26-37. Recuperado a partir de: https://www.longwoods.com/content/22959/nursing-leadership/measuring-outcomes-of-nursing-care-improving-the-health-of-canadians-nnqr-c-c-hobic-and-nquire

Jeffs L, Nincic V, White P, Hayes L, Lo J. Leveraging data to transform nursing care: Insights from nurse leaders. J Nurs Care Qual [Internet]. 2015;30(3):269-74. doi: 10.1097/NCQ.0000000000000095

Chassin MR, Loeb JM, Schmaltz SP, Wachter RM. Accountability measures—using measurement to promote quality improvement. N Engl J Med [Internet]. 2010;363(7):683-8. doi: 10.1056/NEJMsb1002320

Rapin J, Pellet J, Mabire C, Gendron S, Dubois CA. How does nursing-sensitive indicator feedback with nursing or interprofessional teams work and shape nursing performance improvement systems? A rapid realist review. Syst Rev [Internet]. 2022;11(1):177. doi: https://doi.org/10.1186/s13643-022-02026-y

Dixon N, Pearce M. Guide to Ensuring Data Quality in Clinical Audits. HQIP [Internet]. 2011. Recuperado a partir de: https://www.hqip.org.uk/wp-content/uploads/2018/02/hqip-guide-to-ensuring-data-quality-in-clinical-audits.pdf

Lewis CC, Boyd MR, Walsh-Bailey C, Lyon AR, Beidas R, Mittman B, et al. A systematic review of empirical studies examining mechanisms of implementation in health. Implementation Sci [Internet]. 2020;15(1). doi: https://doi.org/10.1186/s13012-020-00983-3

Straus SE, Tetroe J, Graham ID, Zwarenstein M, Bhattacharyya O. Monitoring and evaluating knowledge. En: Straus SE, Tetroe J, Graham ID. Knowledge Translation in Health Care: Moving from Evidence to Practice [Internet]. Oxford UK:Wiley-Blackwell;2009. Capítulo 3,pág. 151-159. doi: https://doi.org/10.1002/9781444311747.ch3

Donabedian A. The quality of care. How can it be assessed? JAMA [Internet]. 1988;260(12):1743-48. doi: https://doi.org/10.1001/jama.260.12.1743

Ortuño-Soriano I, Muñoz-Jiménez D, Moreno-Casbas T, Albornos-Muñoz L, González-María E, Grupo de Trabajo del Programa de Implantación de Buenas Prácticas en Centros Comprometidos con la Excelencia en Cuidados®. Evaluación de estrategias de implantación del Proyecto Centros Comprometidos con la Excelencia en Cuidados en España. Enferm Clin [Internet]. 2020;30(3):222-30. Recuperado a partir de: https://www.clinicalkey.es/#!/content/playContent/1-s2.0-S1130862119305224?returnurl=https:%2F%2Flinkinghub.elsevier.com%2Fretrieve%2Fpii%2FS1130862119305224%3Fshowall%3Dtrue&referrer=https:%2F%2Fpubmed.ncbi.nlm.nih.gov%2F

Grupo de trabajo sobre implementación de GPC. Implementación de Guías de Práctica Clínica en el Sistema Nacional de Salud. Manual metodológico. Plan de Calidad para el Sistema Nacional de Salud del Ministerio de Sanidad y Política Social. Instituto Aragonés de Ciencias de la Salud-I+CS. [Internet]. 2009. Recuperado a partir de: https://portal.guiasalud.es/wp-content/uploads/2019/01/manual_implementacion.pdf

Ivers N, Jamtvedt G, Flottorp S, Young JM, Odgaard-Jensen J, French SD, et al. Audit and feedback: Effects on professional practice and healthcare outcomes. Cochrane Database Syst Rev [Internet]. 2012;(6):CD000259. doi: https://doi.org/10.1002/14651858.CD000259.pub3

Jennett PA, Sinclair L, Harrison RV. Methods, tools, and techniques of evaluation. En: Davis D, Barnes BE, Fox R. The continuing professional development of physicians: From research to practice [Internet]. Chicago:American Medical Association;2003. doi: https://doi.org/10.1016/j.jacr.2003.12.038

Allen P, Meagan P, Walsh-Bailey C, Hooley C, Mazzucca S, Cara C, et al. Quantitative measures of health policy implementation determinants and outcomes: A systematic review. Implementation Sci [Internet]. 2020;15(47). doi: https://doi.org/10.1186/s13012-020-01007-w

How to Cite
1.
González-María E, Muñoz-Jiménez D, Córcoles-Jiménez MP, Albornos-Muñoz L, Alcañiz-Mesas AI, Ortuño-Soriano I, et al. Experience Generating Evaluation and Monitoring Strategies in the Implementation of Clinical Practice Guidelines in Spain. MedUNAB [Internet]. 2023 Sep. 19 [cited 2026 Mar. 9];26(2):282-91. Available from: https://revistasunabeduco.biteca.online/index.php/medunab/article/view/4644

Downloads

Download data is not yet available.
Published
2023-09-19

Altmetric

Article metrics
Abstract views
Galley vies
PDF Views
HTML views
Other views
Escanea para compartir
QR Code
Crossref Cited-by logo

Some similar items: