Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises
Autor(a) principal: | |
---|---|
Data de Publicação: | 2005 |
Outros Autores: | , , , |
Tipo de documento: | Artigo |
Idioma: | por |
Título da fonte: | Repositório Institucional da UNIFESP |
Texto Completo: | http://dx.doi.org/10.1590/S0034-89102005000600001 http://repositorio.unifesp.br/handle/11600/2826 |
Resumo: | OBJECTIVE: To evaluate whether different quality assessment tools applied to a group of clinical trials could be correlated, and what would be their impact on meta-analysis results. METHODS: Thirty-eight randomized controlled clinical trials were analyzed. These had been selected for a systematic review of the therapeutic efficacy of alpha interferon for treating chronic hepatitis B. The following tools were utilized: Maastricht (M), Delphi (D), Jadad (J) and the Cochrane Collaboration (CC) method (gold standard). The Spearman correlation coefficient was used to compare the results from the three methods. The Kappa test was used to assess the concordance between the reviewers in applying the tools, and the weighted Kappa test was applied to compare the quality ranking determined by the tools. The outcomes assessed in the meta-analyses were clearance of HBV-DNA and HBeAg. RESULTS: The studies presented regular to low quality. The concordance between reviewers varied according to the instrument utilized: D=0.12; J=0.29; M=0.33; and CC=0.53. The correlation was moderate and homogeneous (D/J=0.51; D/M=0.53; and J/M=0.52). Thje meta-analysis result relating to HBV-DNA ranged from RR=0.71 (95% CI: 0.66-0.77) to RR=0.67 (95% CI: 0.58-0.79). For HBeAg, the results ranged from RR=0.85 (95% CI: 0.80-0.90) to RR=0.85 ( 95% CI: 0.77-0.93). These results depended on the quality of the studies included. CONCLUSIONS: The quality assessment tools presented good correlation. In systematic reviews with the same direction of effect, the quality assessment may not significantly change the results. The Cochrane Collaboration method was the most reproducible method and easiest to apply. |
id |
UFSP_e5fa0deb7be359330ab7006881b32980 |
---|---|
oai_identifier_str |
oai:repositorio.unifesp.br/:11600/2826 |
network_acronym_str |
UFSP |
network_name_str |
Repositório Institucional da UNIFESP |
repository_id_str |
3465 |
spelling |
Avaliação da qualidade de estudos clínicos e seu impacto nas metanálisesAssessment of clinical trial quality and its impact on meta-analysesRandomized controlled trialsQuality assuranceQuestionnairesOutcome assessmentQuality controlEnsaios controlados aleatóriosGarantia de qualidade dos cuidados de saúdeQuestionáriosAvaliação de resultadosControle de qualidadeOBJECTIVE: To evaluate whether different quality assessment tools applied to a group of clinical trials could be correlated, and what would be their impact on meta-analysis results. METHODS: Thirty-eight randomized controlled clinical trials were analyzed. These had been selected for a systematic review of the therapeutic efficacy of alpha interferon for treating chronic hepatitis B. The following tools were utilized: Maastricht (M), Delphi (D), Jadad (J) and the Cochrane Collaboration (CC) method (gold standard). The Spearman correlation coefficient was used to compare the results from the three methods. The Kappa test was used to assess the concordance between the reviewers in applying the tools, and the weighted Kappa test was applied to compare the quality ranking determined by the tools. The outcomes assessed in the meta-analyses were clearance of HBV-DNA and HBeAg. RESULTS: The studies presented regular to low quality. The concordance between reviewers varied according to the instrument utilized: D=0.12; J=0.29; M=0.33; and CC=0.53. The correlation was moderate and homogeneous (D/J=0.51; D/M=0.53; and J/M=0.52). Thje meta-analysis result relating to HBV-DNA ranged from RR=0.71 (95% CI: 0.66-0.77) to RR=0.67 (95% CI: 0.58-0.79). For HBeAg, the results ranged from RR=0.85 (95% CI: 0.80-0.90) to RR=0.85 ( 95% CI: 0.77-0.93). These results depended on the quality of the studies included. CONCLUSIONS: The quality assessment tools presented good correlation. In systematic reviews with the same direction of effect, the quality assessment may not significantly change the results. The Cochrane Collaboration method was the most reproducible method and easiest to apply.OBJETIVO: Analisar se diferentes instrumentos de avaliação de qualidade, aplicados a um grupo de estudos clínicos que se correlacionam e qual seu impacto no resultado na metanálise. MÉTODOS: Foram analisados 38 estudos clínicos randomizados e controlados, selecionados para a revisão sistemática sobre a eficácia terapêutica do Interferon Alfa no tratamento da hepatite crônica pelo vírus B. Utilizaram-se os seguintes instrumentos: Maastricht (M), Delphi (D) e Jadad (J) e o método da Colaboração Cochrane (CC), considerado padrão-ouro. Os resultados definidos pelos três instrumentos foram comparados pelo teste de Correlação de Spearman. O teste de Kappa (K) avaliou a concordância entre os revisores na aplicação dos instrumentos e o teste de Kappa ponderado analisou o ordenamento de qualidade definido pelos instrumentos. O clareamento do HBV-DNA e HbeAg foi o desfecho avaliado na metanálise. RESULTADOS: Os estudos foram de regular e baixa qualidade. A concordância entre os revisores foi, de acordo com o instrumento: D=0.12, J=0.29 e M=0.33 e CC= 0,53. A correlação foi moderada e homogênea (D/J=0,51; D/M=0,53 e J/M=0,52). Os resultados da metanálise (HBV-DNA), variaram de RR=0,71; IC 95%: 0,66-0,77 a RR=0,67; IC 95%: 0,58-0,79 e (HbeAg) de RR=0,85; IC 95%: 0,80-0,90 a RR=0,85; IC 95%:0,77-0,93, dependendo da qualidade dos estudos incluídos. CONCLUSÕES: Os instrumentos de avaliação de qualidade têm boa correlação. Nas revisões sistemáticas que apontem à mesma direção do efeito, a avaliação pode não alterar significantemente seu resultado. O método da Colaboração Cochrane é o mais reprodutível e de simples aplicação.Faculdade Estadual de Medicina de MaríliaUniversidade Federal do Rio Grande do NorteUniversidade Federal de São Paulo (UNIFESP) Escola Paulista de MedicinaUNIFESP, EPMSciELOFaculdade de Saúde Pública da Universidade de São PauloFaculdade Estadual de Medicina de MaríliaUniversidade Federal do Rio Grande do NorteUniversidade Federal de São Paulo (UNIFESP)Silva Filho, Carlos Rodrigues da [UNIFESP]Saconato, HumbertoConterno, Lucieni de Oliveira [UNIFESP]Marques, IaraAtallah, Álvaro Nagib [UNIFESP]2015-06-14T13:31:52Z2015-06-14T13:31:52Z2005-12-01info:eu-repo/semantics/articleinfo:eu-repo/semantics/publishedVersion865-873application/pdfapplication/pdfhttp://dx.doi.org/10.1590/S0034-89102005000600001SILVA FILHO, Carlos Rodrigues da et al . Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises. Rev. Saúde Pública, São Paulo , v. 39, n. 6, p. 865-873, dez. 200510.1590/S0034-89102005000600001S0034-89102005000600001.pdfS0034-89102005000600001-pt.pdf0034-8910S0034-89102005000600001http://repositorio.unifesp.br/handle/11600/2826WOS:000234857900001porRevista de Saúde Públicainfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da UNIFESPinstname:Universidade Federal de São Paulo (UNIFESP)instacron:UNIFESP2024-08-04T14:39:13Zoai:repositorio.unifesp.br/:11600/2826Repositório InstitucionalPUBhttp://www.repositorio.unifesp.br/oai/requestbiblioteca.csp@unifesp.bropendoar:34652024-08-04T14:39:13Repositório Institucional da UNIFESP - Universidade Federal de São Paulo (UNIFESP)false |
dc.title.none.fl_str_mv |
Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises Assessment of clinical trial quality and its impact on meta-analyses |
title |
Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises |
spellingShingle |
Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises Silva Filho, Carlos Rodrigues da [UNIFESP] Randomized controlled trials Quality assurance Questionnaires Outcome assessment Quality control Ensaios controlados aleatórios Garantia de qualidade dos cuidados de saúde Questionários Avaliação de resultados Controle de qualidade |
title_short |
Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises |
title_full |
Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises |
title_fullStr |
Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises |
title_full_unstemmed |
Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises |
title_sort |
Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises |
author |
Silva Filho, Carlos Rodrigues da [UNIFESP] |
author_facet |
Silva Filho, Carlos Rodrigues da [UNIFESP] Saconato, Humberto Conterno, Lucieni de Oliveira [UNIFESP] Marques, Iara Atallah, Álvaro Nagib [UNIFESP] |
author_role |
author |
author2 |
Saconato, Humberto Conterno, Lucieni de Oliveira [UNIFESP] Marques, Iara Atallah, Álvaro Nagib [UNIFESP] |
author2_role |
author author author author |
dc.contributor.none.fl_str_mv |
Faculdade Estadual de Medicina de Marília Universidade Federal do Rio Grande do Norte Universidade Federal de São Paulo (UNIFESP) |
dc.contributor.author.fl_str_mv |
Silva Filho, Carlos Rodrigues da [UNIFESP] Saconato, Humberto Conterno, Lucieni de Oliveira [UNIFESP] Marques, Iara Atallah, Álvaro Nagib [UNIFESP] |
dc.subject.por.fl_str_mv |
Randomized controlled trials Quality assurance Questionnaires Outcome assessment Quality control Ensaios controlados aleatórios Garantia de qualidade dos cuidados de saúde Questionários Avaliação de resultados Controle de qualidade |
topic |
Randomized controlled trials Quality assurance Questionnaires Outcome assessment Quality control Ensaios controlados aleatórios Garantia de qualidade dos cuidados de saúde Questionários Avaliação de resultados Controle de qualidade |
description |
OBJECTIVE: To evaluate whether different quality assessment tools applied to a group of clinical trials could be correlated, and what would be their impact on meta-analysis results. METHODS: Thirty-eight randomized controlled clinical trials were analyzed. These had been selected for a systematic review of the therapeutic efficacy of alpha interferon for treating chronic hepatitis B. The following tools were utilized: Maastricht (M), Delphi (D), Jadad (J) and the Cochrane Collaboration (CC) method (gold standard). The Spearman correlation coefficient was used to compare the results from the three methods. The Kappa test was used to assess the concordance between the reviewers in applying the tools, and the weighted Kappa test was applied to compare the quality ranking determined by the tools. The outcomes assessed in the meta-analyses were clearance of HBV-DNA and HBeAg. RESULTS: The studies presented regular to low quality. The concordance between reviewers varied according to the instrument utilized: D=0.12; J=0.29; M=0.33; and CC=0.53. The correlation was moderate and homogeneous (D/J=0.51; D/M=0.53; and J/M=0.52). Thje meta-analysis result relating to HBV-DNA ranged from RR=0.71 (95% CI: 0.66-0.77) to RR=0.67 (95% CI: 0.58-0.79). For HBeAg, the results ranged from RR=0.85 (95% CI: 0.80-0.90) to RR=0.85 ( 95% CI: 0.77-0.93). These results depended on the quality of the studies included. CONCLUSIONS: The quality assessment tools presented good correlation. In systematic reviews with the same direction of effect, the quality assessment may not significantly change the results. The Cochrane Collaboration method was the most reproducible method and easiest to apply. |
publishDate |
2005 |
dc.date.none.fl_str_mv |
2005-12-01 2015-06-14T13:31:52Z 2015-06-14T13:31:52Z |
dc.type.driver.fl_str_mv |
info:eu-repo/semantics/article |
dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
format |
article |
status_str |
publishedVersion |
dc.identifier.uri.fl_str_mv |
http://dx.doi.org/10.1590/S0034-89102005000600001 SILVA FILHO, Carlos Rodrigues da et al . Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises. Rev. Saúde Pública, São Paulo , v. 39, n. 6, p. 865-873, dez. 2005 10.1590/S0034-89102005000600001 S0034-89102005000600001.pdf S0034-89102005000600001-pt.pdf 0034-8910 S0034-89102005000600001 http://repositorio.unifesp.br/handle/11600/2826 WOS:000234857900001 |
url |
http://dx.doi.org/10.1590/S0034-89102005000600001 http://repositorio.unifesp.br/handle/11600/2826 |
identifier_str_mv |
SILVA FILHO, Carlos Rodrigues da et al . Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises. Rev. Saúde Pública, São Paulo , v. 39, n. 6, p. 865-873, dez. 2005 10.1590/S0034-89102005000600001 S0034-89102005000600001.pdf S0034-89102005000600001-pt.pdf 0034-8910 S0034-89102005000600001 WOS:000234857900001 |
dc.language.iso.fl_str_mv |
por |
language |
por |
dc.relation.none.fl_str_mv |
Revista de Saúde Pública |
dc.rights.driver.fl_str_mv |
info:eu-repo/semantics/openAccess |
eu_rights_str_mv |
openAccess |
dc.format.none.fl_str_mv |
865-873 application/pdf application/pdf |
dc.publisher.none.fl_str_mv |
Faculdade de Saúde Pública da Universidade de São Paulo |
publisher.none.fl_str_mv |
Faculdade de Saúde Pública da Universidade de São Paulo |
dc.source.none.fl_str_mv |
reponame:Repositório Institucional da UNIFESP instname:Universidade Federal de São Paulo (UNIFESP) instacron:UNIFESP |
instname_str |
Universidade Federal de São Paulo (UNIFESP) |
instacron_str |
UNIFESP |
institution |
UNIFESP |
reponame_str |
Repositório Institucional da UNIFESP |
collection |
Repositório Institucional da UNIFESP |
repository.name.fl_str_mv |
Repositório Institucional da UNIFESP - Universidade Federal de São Paulo (UNIFESP) |
repository.mail.fl_str_mv |
biblioteca.csp@unifesp.br |
_version_ |
1814268277478653952 |