Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises

Detalhes bibliográficos
Autor(a) principal: Silva Filho, Carlos Rodrigues da [UNIFESP]
Data de Publicação: 2005
Outros Autores: Saconato, Humberto, Conterno, Lucieni de Oliveira [UNIFESP], Marques, Iara, Atallah, Álvaro Nagib [UNIFESP]
Tipo de documento: Artigo
Idioma: por
Título da fonte: Repositório Institucional da UNIFESP
Texto Completo: http://dx.doi.org/10.1590/S0034-89102005000600001
http://repositorio.unifesp.br/handle/11600/2826
Resumo: OBJECTIVE: To evaluate whether different quality assessment tools applied to a group of clinical trials could be correlated, and what would be their impact on meta-analysis results. METHODS: Thirty-eight randomized controlled clinical trials were analyzed. These had been selected for a systematic review of the therapeutic efficacy of alpha interferon for treating chronic hepatitis B. The following tools were utilized: Maastricht (M), Delphi (D), Jadad (J) and the Cochrane Collaboration (CC) method (gold standard). The Spearman correlation coefficient was used to compare the results from the three methods. The Kappa test was used to assess the concordance between the reviewers in applying the tools, and the weighted Kappa test was applied to compare the quality ranking determined by the tools. The outcomes assessed in the meta-analyses were clearance of HBV-DNA and HBeAg. RESULTS: The studies presented regular to low quality. The concordance between reviewers varied according to the instrument utilized: D=0.12; J=0.29; M=0.33; and CC=0.53. The correlation was moderate and homogeneous (D/J=0.51; D/M=0.53; and J/M=0.52). Thje meta-analysis result relating to HBV-DNA ranged from RR=0.71 (95% CI: 0.66-0.77) to RR=0.67 (95% CI: 0.58-0.79). For HBeAg, the results ranged from RR=0.85 (95% CI: 0.80-0.90) to RR=0.85 ( 95% CI: 0.77-0.93). These results depended on the quality of the studies included. CONCLUSIONS: The quality assessment tools presented good correlation. In systematic reviews with the same direction of effect, the quality assessment may not significantly change the results. The Cochrane Collaboration method was the most reproducible method and easiest to apply.
id UFSP_e5fa0deb7be359330ab7006881b32980
oai_identifier_str oai:repositorio.unifesp.br/:11600/2826
network_acronym_str UFSP
network_name_str Repositório Institucional da UNIFESP
repository_id_str 3465
spelling Avaliação da qualidade de estudos clínicos e seu impacto nas metanálisesAssessment of clinical trial quality and its impact on meta-analysesRandomized controlled trialsQuality assuranceQuestionnairesOutcome assessmentQuality controlEnsaios controlados aleatóriosGarantia de qualidade dos cuidados de saúdeQuestionáriosAvaliação de resultadosControle de qualidadeOBJECTIVE: To evaluate whether different quality assessment tools applied to a group of clinical trials could be correlated, and what would be their impact on meta-analysis results. METHODS: Thirty-eight randomized controlled clinical trials were analyzed. These had been selected for a systematic review of the therapeutic efficacy of alpha interferon for treating chronic hepatitis B. The following tools were utilized: Maastricht (M), Delphi (D), Jadad (J) and the Cochrane Collaboration (CC) method (gold standard). The Spearman correlation coefficient was used to compare the results from the three methods. The Kappa test was used to assess the concordance between the reviewers in applying the tools, and the weighted Kappa test was applied to compare the quality ranking determined by the tools. The outcomes assessed in the meta-analyses were clearance of HBV-DNA and HBeAg. RESULTS: The studies presented regular to low quality. The concordance between reviewers varied according to the instrument utilized: D=0.12; J=0.29; M=0.33; and CC=0.53. The correlation was moderate and homogeneous (D/J=0.51; D/M=0.53; and J/M=0.52). Thje meta-analysis result relating to HBV-DNA ranged from RR=0.71 (95% CI: 0.66-0.77) to RR=0.67 (95% CI: 0.58-0.79). For HBeAg, the results ranged from RR=0.85 (95% CI: 0.80-0.90) to RR=0.85 ( 95% CI: 0.77-0.93). These results depended on the quality of the studies included. CONCLUSIONS: The quality assessment tools presented good correlation. In systematic reviews with the same direction of effect, the quality assessment may not significantly change the results. The Cochrane Collaboration method was the most reproducible method and easiest to apply.OBJETIVO: Analisar se diferentes instrumentos de avaliação de qualidade, aplicados a um grupo de estudos clínicos que se correlacionam e qual seu impacto no resultado na metanálise. MÉTODOS: Foram analisados 38 estudos clínicos randomizados e controlados, selecionados para a revisão sistemática sobre a eficácia terapêutica do Interferon Alfa no tratamento da hepatite crônica pelo vírus B. Utilizaram-se os seguintes instrumentos: Maastricht (M), Delphi (D) e Jadad (J) e o método da Colaboração Cochrane (CC), considerado padrão-ouro. Os resultados definidos pelos três instrumentos foram comparados pelo teste de Correlação de Spearman. O teste de Kappa (K) avaliou a concordância entre os revisores na aplicação dos instrumentos e o teste de Kappa ponderado analisou o ordenamento de qualidade definido pelos instrumentos. O clareamento do HBV-DNA e HbeAg foi o desfecho avaliado na metanálise. RESULTADOS: Os estudos foram de regular e baixa qualidade. A concordância entre os revisores foi, de acordo com o instrumento: D=0.12, J=0.29 e M=0.33 e CC= 0,53. A correlação foi moderada e homogênea (D/J=0,51; D/M=0,53 e J/M=0,52). Os resultados da metanálise (HBV-DNA), variaram de RR=0,71; IC 95%: 0,66-0,77 a RR=0,67; IC 95%: 0,58-0,79 e (HbeAg) de RR=0,85; IC 95%: 0,80-0,90 a RR=0,85; IC 95%:0,77-0,93, dependendo da qualidade dos estudos incluídos. CONCLUSÕES: Os instrumentos de avaliação de qualidade têm boa correlação. Nas revisões sistemáticas que apontem à mesma direção do efeito, a avaliação pode não alterar significantemente seu resultado. O método da Colaboração Cochrane é o mais reprodutível e de simples aplicação.Faculdade Estadual de Medicina de MaríliaUniversidade Federal do Rio Grande do NorteUniversidade Federal de São Paulo (UNIFESP) Escola Paulista de MedicinaUNIFESP, EPMSciELOFaculdade de Saúde Pública da Universidade de São PauloFaculdade Estadual de Medicina de MaríliaUniversidade Federal do Rio Grande do NorteUniversidade Federal de São Paulo (UNIFESP)Silva Filho, Carlos Rodrigues da [UNIFESP]Saconato, HumbertoConterno, Lucieni de Oliveira [UNIFESP]Marques, IaraAtallah, Álvaro Nagib [UNIFESP]2015-06-14T13:31:52Z2015-06-14T13:31:52Z2005-12-01info:eu-repo/semantics/articleinfo:eu-repo/semantics/publishedVersion865-873application/pdfapplication/pdfhttp://dx.doi.org/10.1590/S0034-89102005000600001SILVA FILHO, Carlos Rodrigues da et al . Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises. Rev. Saúde Pública, São Paulo , v. 39, n. 6, p. 865-873, dez. 200510.1590/S0034-89102005000600001S0034-89102005000600001.pdfS0034-89102005000600001-pt.pdf0034-8910S0034-89102005000600001http://repositorio.unifesp.br/handle/11600/2826WOS:000234857900001porRevista de Saúde Públicainfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da UNIFESPinstname:Universidade Federal de São Paulo (UNIFESP)instacron:UNIFESP2024-08-04T14:39:13Zoai:repositorio.unifesp.br/:11600/2826Repositório InstitucionalPUBhttp://www.repositorio.unifesp.br/oai/requestbiblioteca.csp@unifesp.bropendoar:34652024-08-04T14:39:13Repositório Institucional da UNIFESP - Universidade Federal de São Paulo (UNIFESP)false
dc.title.none.fl_str_mv Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises
Assessment of clinical trial quality and its impact on meta-analyses
title Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises
spellingShingle Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises
Silva Filho, Carlos Rodrigues da [UNIFESP]
Randomized controlled trials
Quality assurance
Questionnaires
Outcome assessment
Quality control
Ensaios controlados aleatórios
Garantia de qualidade dos cuidados de saúde
Questionários
Avaliação de resultados
Controle de qualidade
title_short Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises
title_full Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises
title_fullStr Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises
title_full_unstemmed Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises
title_sort Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises
author Silva Filho, Carlos Rodrigues da [UNIFESP]
author_facet Silva Filho, Carlos Rodrigues da [UNIFESP]
Saconato, Humberto
Conterno, Lucieni de Oliveira [UNIFESP]
Marques, Iara
Atallah, Álvaro Nagib [UNIFESP]
author_role author
author2 Saconato, Humberto
Conterno, Lucieni de Oliveira [UNIFESP]
Marques, Iara
Atallah, Álvaro Nagib [UNIFESP]
author2_role author
author
author
author
dc.contributor.none.fl_str_mv Faculdade Estadual de Medicina de Marília
Universidade Federal do Rio Grande do Norte
Universidade Federal de São Paulo (UNIFESP)
dc.contributor.author.fl_str_mv Silva Filho, Carlos Rodrigues da [UNIFESP]
Saconato, Humberto
Conterno, Lucieni de Oliveira [UNIFESP]
Marques, Iara
Atallah, Álvaro Nagib [UNIFESP]
dc.subject.por.fl_str_mv Randomized controlled trials
Quality assurance
Questionnaires
Outcome assessment
Quality control
Ensaios controlados aleatórios
Garantia de qualidade dos cuidados de saúde
Questionários
Avaliação de resultados
Controle de qualidade
topic Randomized controlled trials
Quality assurance
Questionnaires
Outcome assessment
Quality control
Ensaios controlados aleatórios
Garantia de qualidade dos cuidados de saúde
Questionários
Avaliação de resultados
Controle de qualidade
description OBJECTIVE: To evaluate whether different quality assessment tools applied to a group of clinical trials could be correlated, and what would be their impact on meta-analysis results. METHODS: Thirty-eight randomized controlled clinical trials were analyzed. These had been selected for a systematic review of the therapeutic efficacy of alpha interferon for treating chronic hepatitis B. The following tools were utilized: Maastricht (M), Delphi (D), Jadad (J) and the Cochrane Collaboration (CC) method (gold standard). The Spearman correlation coefficient was used to compare the results from the three methods. The Kappa test was used to assess the concordance between the reviewers in applying the tools, and the weighted Kappa test was applied to compare the quality ranking determined by the tools. The outcomes assessed in the meta-analyses were clearance of HBV-DNA and HBeAg. RESULTS: The studies presented regular to low quality. The concordance between reviewers varied according to the instrument utilized: D=0.12; J=0.29; M=0.33; and CC=0.53. The correlation was moderate and homogeneous (D/J=0.51; D/M=0.53; and J/M=0.52). Thje meta-analysis result relating to HBV-DNA ranged from RR=0.71 (95% CI: 0.66-0.77) to RR=0.67 (95% CI: 0.58-0.79). For HBeAg, the results ranged from RR=0.85 (95% CI: 0.80-0.90) to RR=0.85 ( 95% CI: 0.77-0.93). These results depended on the quality of the studies included. CONCLUSIONS: The quality assessment tools presented good correlation. In systematic reviews with the same direction of effect, the quality assessment may not significantly change the results. The Cochrane Collaboration method was the most reproducible method and easiest to apply.
publishDate 2005
dc.date.none.fl_str_mv 2005-12-01
2015-06-14T13:31:52Z
2015-06-14T13:31:52Z
dc.type.driver.fl_str_mv info:eu-repo/semantics/article
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
format article
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://dx.doi.org/10.1590/S0034-89102005000600001
SILVA FILHO, Carlos Rodrigues da et al . Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises. Rev. Saúde Pública, São Paulo , v. 39, n. 6, p. 865-873, dez. 2005
10.1590/S0034-89102005000600001
S0034-89102005000600001.pdf
S0034-89102005000600001-pt.pdf
0034-8910
S0034-89102005000600001
http://repositorio.unifesp.br/handle/11600/2826
WOS:000234857900001
url http://dx.doi.org/10.1590/S0034-89102005000600001
http://repositorio.unifesp.br/handle/11600/2826
identifier_str_mv SILVA FILHO, Carlos Rodrigues da et al . Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises. Rev. Saúde Pública, São Paulo , v. 39, n. 6, p. 865-873, dez. 2005
10.1590/S0034-89102005000600001
S0034-89102005000600001.pdf
S0034-89102005000600001-pt.pdf
0034-8910
S0034-89102005000600001
WOS:000234857900001
dc.language.iso.fl_str_mv por
language por
dc.relation.none.fl_str_mv Revista de Saúde Pública
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv 865-873
application/pdf
application/pdf
dc.publisher.none.fl_str_mv Faculdade de Saúde Pública da Universidade de São Paulo
publisher.none.fl_str_mv Faculdade de Saúde Pública da Universidade de São Paulo
dc.source.none.fl_str_mv reponame:Repositório Institucional da UNIFESP
instname:Universidade Federal de São Paulo (UNIFESP)
instacron:UNIFESP
instname_str Universidade Federal de São Paulo (UNIFESP)
instacron_str UNIFESP
institution UNIFESP
reponame_str Repositório Institucional da UNIFESP
collection Repositório Institucional da UNIFESP
repository.name.fl_str_mv Repositório Institucional da UNIFESP - Universidade Federal de São Paulo (UNIFESP)
repository.mail.fl_str_mv biblioteca.csp@unifesp.br
_version_ 1814268277478653952