Validation of surgical care quality indicators in the Brazilian Unified Health System
DOI:
https://doi.org/10.11606/s1518-8787.2023057004723Keywords:
Quality of Health Care, Quality Indicators in Health Care, Patient Safety, Surgical Operating ProceduresAbstract
OBJECTIVE: To validate a set of indicators for monitoring the quality of surgical procedures in the Unified Health System (SUS). METHODS: Validation study developed in 5 stages: 1) literature review; 2) prioritization of indicators; 3) content validation of indicators by RAND/UCLA consensus method; 4) pilot study for reliability analysis; and 5) development of instruction for tabulation of outcome indicators for monitoring via official information systems. RESULTS: From the literature review, 217 indicators of surgical quality were identified. The excluded indicators were: those based on scientific evidence lower than 1A, similar, specific, which corresponded to sentinel events; and those that did not apply to the SUS context. Twenty-six indicators with a high level of scientific evidence were submitted to expert consensus. Twenty-two indicators were validated, of which 14 process indicators and 8 outcome indicators with content validation index ≥80%. Of the validated process indicators, 6 were considered substantially reliable (Kappa coefficient between 0.6 and 0.8; p < 0.05) and 2 had almost perfect reliability (Kappa coefficient > 0.8, p < 0.05), when the inter-rater agreement was analyzed. One could measure and establish tabulation mechanism for TabWin for 7 outcome indicators. CONCLUSION: The study contributes to the development of a set of potentially effective surgical indicators for monitoring the quality of care and patient safety in SUS hospital services.
References
Ministério da Saúde (BR). Banco de dados do Sistema Único de Saúde-DATASUS. Brasília, DF: Ministério da Saúde; 2021[citado 11 out 2021]. Disponível em: http://www.datasus.gov.br
Weiser TG, Haynes AB, Molina G, Lipsitz SR, Esquivel MM, Uribe-Leitz T, et al. Size and distribution of the global volume of surgery in 2012. Bull World Health Organ. 2016 Mar;94(3):201-209F. https://doi.org/10.2471/BLT.15.159293
World Health Organization & WHO Patient Safety. The Second Global Patient Safety Challenge: Safe Surgery Saves Lives. Geneva (CH): WHO; 2011 [citado 11 out 2021]. Disponivel em: https://apps.who.int/iris/handle/10665/70080
Ministério da Saúde (BR). Portaria nº 529, de 1º de abril de 2013. Institui o Programa Nacional de Segurança do Paciente (PNSP). Brasília, DF: Ministério da Saúde; 2013[citado 11 out 2021]. Disponível em: http://www.saude.mt.gov.br/upload/controle-infeccoes/pasta2/portariamsgm-n-529-de-01-04-2013.pdfBrasil
World Health Organization; World Bank Group; Organization for Economic Co-operation and Development. Delivering quality health services. Geneva: WHO; 2018 [citado 11 out 2021]. Disponível em: https://apps.who.int/iris/bitstream/handle/10665/272465/9789241513906-eng.pdf?ua=1
Pringle M, Wilson T, Grol R. Measuring “goodness”? in individuals and healthcare systems. BMJ. 2002;325(7366):704-7. http://doi: 10.1136/bmj.325.7366.704.
Chazapis M, Gilhooly D, Smith AF, Myles PS, Haller G, Grocott MP, et al. Perioperative structure and process quality and safety indicators: a systematic review. Br J Anaesth. 2018 Jan;120(1):51-66. https://doi.org/10.1016/j.bja.2017.10.001 PMID:29397138
Haller G, Bampoe S, Cook T, Fleisher LA, Grocott MP, Neuman M, et al. Systematic review and consensus definitions for the Standardised Endpoints in Perioperative Medicine initiative: clinical indicators. Br J Anaesth. 2019 Aug;123(2):228-37. https://doi.org/10.1016/j.bja.2019.04.041
D’Innocenzo M, Adami NP, Cunha IC. O movimento pela qualidade nos serviços de saúde e enfermagem. Rev Bras Enferm. 2006;59(1):84-8. https://doi.org/10.1590/S0034-71672006000100016
Agência Nacional de Saúde Suplementar (BR). Consórcio de Indicadores de Qualidade Hospitalar: painel geral. Brasília, DF: ANS; 2014 [citado 11 out 2021]. Disponivel em: https://www.gov.br/ans/ptbr/arquivos/assuntos/prestadores/qualiss-programa-de-qualificacao-dos-prestadores-de-servicos-de-saude-1/consorcio-de-indicadores-qualidade-hospitalar2-pdf
Agência Nacional de Vigilância Sanitária. Critérios diagnósticos de infecção do sítio cirúrgico (ISC). Brasília, DF: ANVISA; 2017 [citado 20 março 2022]. Disponível em: http://portal.anvisa.gov.br/documents/33852/3507912/Caderno+2+-+Critérios+Diagnósticos+de+Infecção+Relacionada+à+Assistência+à+Saúde/7485b45a-074f-4b34-8868-61f1e5724501
Gama ZA, Saturno-Hern?ndez PJ, Ribeiro DN, Freitas MR, Medeiros PJ, Batista AM, et al. Desenvolvimento e validação de indicadores de boas práticas de segurança do paciente: projeto ISEP-Brasil. Cad Saúde Pública. 2016 Sep;32(9):e00026215. https://doi.org/10.1590/0102-311X00026215
Fundaçãoo Oswaldo Cruz. PROADESS - Avaliação de Desempenho do sistema de saúde brasileiro: indicadores paramonitoramento: relatório final. Rio de Janeiro: Fiocruz; 2012. Disponível em: https://www.proadess.icict.fiocruz.br/Relatorio_Proadess_08-10-2012.pdf
Gouvêa C, Travassos C, Caixeiro F, Carvalho LS, Pontes B. Desenvolvimento de indicadores de segurança para monitoramento do cuidado em hospitais brasileiros de pacientes agudos. Rio de Janeiro: Proqualis; 2015 [citado 20 março 2022]. Disponível em: https://proqualis.net/sites/proqualis.net/files/indicadores%20de%20qualidade.pdf
Fitch K, Bernstein SJ, Aguilar MD, Burnand B, LaCalle R, Lazaro P, et al. The RAND/UCLA appropriateness method user's manual. Santa Monica: Rand Corporation, 2001 [citado 20 março 2022]. Disponível em: https://www.rand.org/pubs/monograph_reports/MR1269.html
Soria-Aledo V, Angel-Garcia D, Martinez-Nicolas I, Rebasa Cladera P, Cabezali Sanchez R, Pereira Garc?a LF. Desarrollo y estudio piloto de un conjunto esencial de indicadores para los servicios de cirugía general. Cir Esp. 2016 Nov;94(9):502-10. https://doi.org/10.1016/j.ciresp.2016.06.009
Yusoff MS. ABC of content validation and content validity index calculation. Educ Med J. 2019;11(2):49-54. https://doi.org/10.21315/eimj2019.11.2.6
Mokkink LB. COSMIN Risk of Bias checklist. Amsterdam: COSMIM; 2018[citado 20 de março de 2022]. Disponível em: https://www.cosmin.nl/wp-content/uploads/COSMIN-RoB-checklist-V2-0-v17_rev3.pdf
Saturno-Hernandez P. Métodos y herramientas para la monitorización de la calidad. Cuernavaca: Instituto Nacional de Salud Pública; 2015 [citado 20 março 2022]. Disponível em: https://www.researchgate.net/publication/299486843_Metodos_y_herramientas_para_la_monitorizacion_de_la_calidad_en_servicios_de_salud
Landis JR, Koch GG. An application of hierarchical kappa-type statistics in the assessment of majority agreement among multiple observers. Biometrics. 1977 Jun;33(2):363-74. https://doi.org/10.2307/2529786
Donabedian A. The definition of quality and approaches to its assessment. Michigan: Anne Arbor; 1980.
World Health Organization. Global patient safety action plan 2021-2030: towards eliminating avoidable harm in health care. Geneva: WHO; 2021[citado 20 março 2022]. Disponível em: https://apps.who.int/iris/handle/10665/343477
Meara JG, Leather AJ, Hagander L, Alkire BC, Alonso N, Ameh EA, et al. Global Surgery 2030: evidence and solutions for achieving health, welfare, and economic development. Lancet. 2015 Aug;386(9993):569-624. https://doi.org/10.1016/S0140-6736(15)60160-X
Mello DM. Monitoramento das infecções de sítio cirúrgico no estado de São Paulo: seleção e implementação de indicadores [dissertação]. São Paulo: Universidade de São Paulo; 2013.
Wind A, Harten WH. Benchmarking specialty hospitals, a scoping review on theory and practice. BMC Health Serv Res. 2017 Apr;17(1):245. https://doi.org/10.1186/s12913-017-2154-y
Oliveira AC, Martins MA, Martinho GH, Clemente WT, Lacerda RA. Estudo comparativo do diagnóstico da infecção do sítio cirúrgico durante e após a internação. Rev Saúde Pública. 2002 Dec;36(6):717-22. https://doi.org/10.1590/S0034-89102002000700009
Oliveira AC, Ciosak SI. Infecção de sítio cirúrgico em hospital universitário: vigilância pós-alta e fatores de risco. Rev Esc Enferm USP. 2007 Jun;41(2):258-63. https://doi.org/10.1590/S0080-62342007000200012
Escosteguy CC, Portela MC, Medronho RA, Vasconcellos MT. O Sistema de Informações Hospitalares e a assistência ao infarto agudo do miocárdio. Rev Saúde Pública. 2002 Aug;36(4):491-9. https://doi.org/10.1590/S0034-89102002000400016
Ministério da Saíde (BR). Resolução nº 6, de 25 de agosto de 2016. Institui o Conjunto Mínimo de Dados da Atenção à Saúde e outras providências. Diário Oficial União, 9 set 2016.
Jones J, Hunter D. Consensus methods for medical and health services research. BMJ. 1995 Aug;311(7001):376-80. https://doi.org/10.1136/bmj.311.7001.376
Sánchez Huerta JA. Diseño de indicadores del uso eficiente del quirófano en un hospital de segundo nivel. Cuernavaca: Instituto Nacional de Salud Pública; 2018 [citado 20 março 2022]. Disponível em: http://repositorio.insp.mx:8080/jspui/handle/20.500.12096/7137
Downloads
Published
Issue
Section
License
Copyright (c) 2023 Anna Cláudia Sales Gomes Caldas, Rafael Santiago de Araújo, Paulo José Medeiros, Marise Reis de Freitas, Victoriano Soria Aledo, Zenewton André da Silva Gama
This work is licensed under a Creative Commons Attribution 4.0 International License.
