Assessment of clinical trial quality and its impact on meta-analyses

Detalhes bibliográficos
Autor(a) principal: Silva Filho, Carlos Rodrigues da
Data de Publicação: 2005
Outros Autores: Saconato, Humberto, Conterno, Lucieni Oliveira, Marques, Iara, Atallah, Álvaro Nagib
Tipo de documento: Artigo
Idioma: por
eng
Título da fonte: Revista de Saúde Pública
Texto Completo: https://www.revistas.usp.br/rsp/article/view/31952
Resumo: OBJETIVO: Analisar se diferentes instrumentos de avaliação de qualidade, aplicados a um grupo de estudos clínicos que se correlacionam e qual seu impacto no resultado na metanálise. MÉTODOS: Foram analisados 38 estudos clínicos randomizados e controlados, selecionados para a revisão sistemática sobre a eficácia terapêutica do Interferon Alfa no tratamento da hepatite crônica pelo vírus B. Utilizaram-se os seguintes instrumentos: Maastricht (M), Delphi (D) e Jadad (J) e o método da Colaboração Cochrane (CC), considerado padrão-ouro. Os resultados definidos pelos três instrumentos foram comparados pelo teste de Correlação de Spearman. O teste de Kappa (K) avaliou a concordância entre os revisores na aplicação dos instrumentos e o teste de Kappa ponderado analisou o ordenamento de qualidade definido pelos instrumentos. O clareamento do HBV-DNA e HbeAg foi o desfecho avaliado na metanálise. RESULTADOS: Os estudos foram de regular e baixa qualidade. A concordância entre os revisores foi, de acordo com o instrumento: D=0.12, J=0.29 e M=0.33 e CC= 0,53. A correlação foi moderada e homogênea (D/J=0,51; D/M=0,53 e J/M=0,52). Os resultados da metanálise (HBV-DNA), variaram de RR=0,71; IC 95%: 0,66-0,77 a RR=0,67; IC 95%: 0,58-0,79 e (HbeAg) de RR=0,85; IC 95%: 0,80-0,90 a RR=0,85; IC 95%:0,77-0,93, dependendo da qualidade dos estudos incluídos. CONCLUSÕES: Os instrumentos de avaliação de qualidade têm boa correlação. Nas revisões sistemáticas que apontem à mesma direção do efeito, a avaliação pode não alterar significantemente seu resultado. O método da Colaboração Cochrane é o mais reprodutível e de simples aplicação.
id USP-23_c7f10878edb17b5c36fc04d3fe5dc4b7
oai_identifier_str oai:revistas.usp.br:article/31952
network_acronym_str USP-23
network_name_str Revista de Saúde Pública
repository_id_str
spelling Assessment of clinical trial quality and its impact on meta-analyses Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises Randomized controlled trialsQuality assurance^i2^shealthcQuestionnairesOutcome assessmentQuality controlEnsaios controlados aleatóriosGarantia de qualidade dos cuidados de saúdeQuestionáriosAvaliação de resultados^i1^scuidados de saControle de qualidade OBJETIVO: Analisar se diferentes instrumentos de avaliação de qualidade, aplicados a um grupo de estudos clínicos que se correlacionam e qual seu impacto no resultado na metanálise. MÉTODOS: Foram analisados 38 estudos clínicos randomizados e controlados, selecionados para a revisão sistemática sobre a eficácia terapêutica do Interferon Alfa no tratamento da hepatite crônica pelo vírus B. Utilizaram-se os seguintes instrumentos: Maastricht (M), Delphi (D) e Jadad (J) e o método da Colaboração Cochrane (CC), considerado padrão-ouro. Os resultados definidos pelos três instrumentos foram comparados pelo teste de Correlação de Spearman. O teste de Kappa (K) avaliou a concordância entre os revisores na aplicação dos instrumentos e o teste de Kappa ponderado analisou o ordenamento de qualidade definido pelos instrumentos. O clareamento do HBV-DNA e HbeAg foi o desfecho avaliado na metanálise. RESULTADOS: Os estudos foram de regular e baixa qualidade. A concordância entre os revisores foi, de acordo com o instrumento: D=0.12, J=0.29 e M=0.33 e CC= 0,53. A correlação foi moderada e homogênea (D/J=0,51; D/M=0,53 e J/M=0,52). Os resultados da metanálise (HBV-DNA), variaram de RR=0,71; IC 95%: 0,66-0,77 a RR=0,67; IC 95%: 0,58-0,79 e (HbeAg) de RR=0,85; IC 95%: 0,80-0,90 a RR=0,85; IC 95%:0,77-0,93, dependendo da qualidade dos estudos incluídos. CONCLUSÕES: Os instrumentos de avaliação de qualidade têm boa correlação. Nas revisões sistemáticas que apontem à mesma direção do efeito, a avaliação pode não alterar significantemente seu resultado. O método da Colaboração Cochrane é o mais reprodutível e de simples aplicação. OBJECTIVE: To evaluate whether different quality assessment tools applied to a group of clinical trials could be correlated, and what would be their impact on meta-analysis results. METHODS: Thirty-eight randomized controlled clinical trials were analyzed. These had been selected for a systematic review of the therapeutic efficacy of alpha interferon for treating chronic hepatitis B. The following tools were utilized: Maastricht (M), Delphi (D), Jadad (J) and the Cochrane Collaboration (CC) method (gold standard). The Spearman correlation coefficient was used to compare the results from the three methods. The Kappa test was used to assess the concordance between the reviewers in applying the tools, and the weighted Kappa test was applied to compare the quality ranking determined by the tools. The outcomes assessed in the meta-analyses were clearance of HBV-DNA and HBeAg. RESULTS: The studies presented regular to low quality. The concordance between reviewers varied according to the instrument utilized: D=0.12; J=0.29; M=0.33; and CC=0.53. The correlation was moderate and homogeneous (D/J=0.51; D/M=0.53; and J/M=0.52). Thje meta-analysis result relating to HBV-DNA ranged from RR=0.71 (95% CI: 0.66-0.77) to RR=0.67 (95% CI: 0.58-0.79). For HBeAg, the results ranged from RR=0.85 (95% CI: 0.80-0.90) to RR=0.85 ( 95% CI: 0.77-0.93). These results depended on the quality of the studies included. CONCLUSIONS: The quality assessment tools presented good correlation. In systematic reviews with the same direction of effect, the quality assessment may not significantly change the results. The Cochrane Collaboration method was the most reproducible method and easiest to apply. Universidade de São Paulo. Faculdade de Saúde Pública2005-12-01info:eu-repo/semantics/articleinfo:eu-repo/semantics/publishedVersionapplication/pdfapplication/pdfhttps://www.revistas.usp.br/rsp/article/view/3195210.1590/S0034-89102005000600001Revista de Saúde Pública; Vol. 39 No. 6 (2005); 865-873 Revista de Saúde Pública; Vol. 39 Núm. 6 (2005); 865-873 Revista de Saúde Pública; v. 39 n. 6 (2005); 865-873 1518-87870034-8910reponame:Revista de Saúde Públicainstname:Universidade de São Paulo (USP)instacron:USPporenghttps://www.revistas.usp.br/rsp/article/view/31952/33949https://www.revistas.usp.br/rsp/article/view/31952/33950Copyright (c) 2017 Revista de Saúde Públicainfo:eu-repo/semantics/openAccessSilva Filho, Carlos Rodrigues daSaconato, HumbertoConterno, Lucieni OliveiraMarques, IaraAtallah, Álvaro Nagib2012-07-08T22:48:20Zoai:revistas.usp.br:article/31952Revistahttps://www.revistas.usp.br/rsp/indexONGhttps://www.revistas.usp.br/rsp/oairevsp@org.usp.br||revsp1@usp.br1518-87870034-8910opendoar:2012-07-08T22:48:20Revista de Saúde Pública - Universidade de São Paulo (USP)false
dc.title.none.fl_str_mv Assessment of clinical trial quality and its impact on meta-analyses
Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises
title Assessment of clinical trial quality and its impact on meta-analyses
spellingShingle Assessment of clinical trial quality and its impact on meta-analyses
Silva Filho, Carlos Rodrigues da
Randomized controlled trials
Quality assurance^i2^shealthc
Questionnaires
Outcome assessment
Quality control
Ensaios controlados aleatórios
Garantia de qualidade dos cuidados de saúde
Questionários
Avaliação de resultados^i1^scuidados de sa
Controle de qualidade
title_short Assessment of clinical trial quality and its impact on meta-analyses
title_full Assessment of clinical trial quality and its impact on meta-analyses
title_fullStr Assessment of clinical trial quality and its impact on meta-analyses
title_full_unstemmed Assessment of clinical trial quality and its impact on meta-analyses
title_sort Assessment of clinical trial quality and its impact on meta-analyses
author Silva Filho, Carlos Rodrigues da
author_facet Silva Filho, Carlos Rodrigues da
Saconato, Humberto
Conterno, Lucieni Oliveira
Marques, Iara
Atallah, Álvaro Nagib
author_role author
author2 Saconato, Humberto
Conterno, Lucieni Oliveira
Marques, Iara
Atallah, Álvaro Nagib
author2_role author
author
author
author
dc.contributor.author.fl_str_mv Silva Filho, Carlos Rodrigues da
Saconato, Humberto
Conterno, Lucieni Oliveira
Marques, Iara
Atallah, Álvaro Nagib
dc.subject.por.fl_str_mv Randomized controlled trials
Quality assurance^i2^shealthc
Questionnaires
Outcome assessment
Quality control
Ensaios controlados aleatórios
Garantia de qualidade dos cuidados de saúde
Questionários
Avaliação de resultados^i1^scuidados de sa
Controle de qualidade
topic Randomized controlled trials
Quality assurance^i2^shealthc
Questionnaires
Outcome assessment
Quality control
Ensaios controlados aleatórios
Garantia de qualidade dos cuidados de saúde
Questionários
Avaliação de resultados^i1^scuidados de sa
Controle de qualidade
description OBJETIVO: Analisar se diferentes instrumentos de avaliação de qualidade, aplicados a um grupo de estudos clínicos que se correlacionam e qual seu impacto no resultado na metanálise. MÉTODOS: Foram analisados 38 estudos clínicos randomizados e controlados, selecionados para a revisão sistemática sobre a eficácia terapêutica do Interferon Alfa no tratamento da hepatite crônica pelo vírus B. Utilizaram-se os seguintes instrumentos: Maastricht (M), Delphi (D) e Jadad (J) e o método da Colaboração Cochrane (CC), considerado padrão-ouro. Os resultados definidos pelos três instrumentos foram comparados pelo teste de Correlação de Spearman. O teste de Kappa (K) avaliou a concordância entre os revisores na aplicação dos instrumentos e o teste de Kappa ponderado analisou o ordenamento de qualidade definido pelos instrumentos. O clareamento do HBV-DNA e HbeAg foi o desfecho avaliado na metanálise. RESULTADOS: Os estudos foram de regular e baixa qualidade. A concordância entre os revisores foi, de acordo com o instrumento: D=0.12, J=0.29 e M=0.33 e CC= 0,53. A correlação foi moderada e homogênea (D/J=0,51; D/M=0,53 e J/M=0,52). Os resultados da metanálise (HBV-DNA), variaram de RR=0,71; IC 95%: 0,66-0,77 a RR=0,67; IC 95%: 0,58-0,79 e (HbeAg) de RR=0,85; IC 95%: 0,80-0,90 a RR=0,85; IC 95%:0,77-0,93, dependendo da qualidade dos estudos incluídos. CONCLUSÕES: Os instrumentos de avaliação de qualidade têm boa correlação. Nas revisões sistemáticas que apontem à mesma direção do efeito, a avaliação pode não alterar significantemente seu resultado. O método da Colaboração Cochrane é o mais reprodutível e de simples aplicação.
publishDate 2005
dc.date.none.fl_str_mv 2005-12-01
dc.type.driver.fl_str_mv info:eu-repo/semantics/article
info:eu-repo/semantics/publishedVersion
format article
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://www.revistas.usp.br/rsp/article/view/31952
10.1590/S0034-89102005000600001
url https://www.revistas.usp.br/rsp/article/view/31952
identifier_str_mv 10.1590/S0034-89102005000600001
dc.language.iso.fl_str_mv por
eng
language por
eng
dc.relation.none.fl_str_mv https://www.revistas.usp.br/rsp/article/view/31952/33949
https://www.revistas.usp.br/rsp/article/view/31952/33950
dc.rights.driver.fl_str_mv Copyright (c) 2017 Revista de Saúde Pública
info:eu-repo/semantics/openAccess
rights_invalid_str_mv Copyright (c) 2017 Revista de Saúde Pública
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
application/pdf
dc.publisher.none.fl_str_mv Universidade de São Paulo. Faculdade de Saúde Pública
publisher.none.fl_str_mv Universidade de São Paulo. Faculdade de Saúde Pública
dc.source.none.fl_str_mv Revista de Saúde Pública; Vol. 39 No. 6 (2005); 865-873
Revista de Saúde Pública; Vol. 39 Núm. 6 (2005); 865-873
Revista de Saúde Pública; v. 39 n. 6 (2005); 865-873
1518-8787
0034-8910
reponame:Revista de Saúde Pública
instname:Universidade de São Paulo (USP)
instacron:USP
instname_str Universidade de São Paulo (USP)
instacron_str USP
institution USP
reponame_str Revista de Saúde Pública
collection Revista de Saúde Pública
repository.name.fl_str_mv Revista de Saúde Pública - Universidade de São Paulo (USP)
repository.mail.fl_str_mv revsp@org.usp.br||revsp1@usp.br
_version_ 1800221783788355584