Assessment of clinical trial quality and its impact on meta-analyses
Autor(a) principal: | |
---|---|
Data de Publicação: | 2005 |
Outros Autores: | , , , |
Tipo de documento: | Artigo |
Idioma: | por eng |
Título da fonte: | Revista de Saúde Pública |
Texto Completo: | https://www.revistas.usp.br/rsp/article/view/31952 |
Resumo: | OBJETIVO: Analisar se diferentes instrumentos de avaliação de qualidade, aplicados a um grupo de estudos clínicos que se correlacionam e qual seu impacto no resultado na metanálise. MÉTODOS: Foram analisados 38 estudos clínicos randomizados e controlados, selecionados para a revisão sistemática sobre a eficácia terapêutica do Interferon Alfa no tratamento da hepatite crônica pelo vírus B. Utilizaram-se os seguintes instrumentos: Maastricht (M), Delphi (D) e Jadad (J) e o método da Colaboração Cochrane (CC), considerado padrão-ouro. Os resultados definidos pelos três instrumentos foram comparados pelo teste de Correlação de Spearman. O teste de Kappa (K) avaliou a concordância entre os revisores na aplicação dos instrumentos e o teste de Kappa ponderado analisou o ordenamento de qualidade definido pelos instrumentos. O clareamento do HBV-DNA e HbeAg foi o desfecho avaliado na metanálise. RESULTADOS: Os estudos foram de regular e baixa qualidade. A concordância entre os revisores foi, de acordo com o instrumento: D=0.12, J=0.29 e M=0.33 e CC= 0,53. A correlação foi moderada e homogênea (D/J=0,51; D/M=0,53 e J/M=0,52). Os resultados da metanálise (HBV-DNA), variaram de RR=0,71; IC 95%: 0,66-0,77 a RR=0,67; IC 95%: 0,58-0,79 e (HbeAg) de RR=0,85; IC 95%: 0,80-0,90 a RR=0,85; IC 95%:0,77-0,93, dependendo da qualidade dos estudos incluídos. CONCLUSÕES: Os instrumentos de avaliação de qualidade têm boa correlação. Nas revisões sistemáticas que apontem à mesma direção do efeito, a avaliação pode não alterar significantemente seu resultado. O método da Colaboração Cochrane é o mais reprodutível e de simples aplicação. |
id |
USP-23_c7f10878edb17b5c36fc04d3fe5dc4b7 |
---|---|
oai_identifier_str |
oai:revistas.usp.br:article/31952 |
network_acronym_str |
USP-23 |
network_name_str |
Revista de Saúde Pública |
repository_id_str |
|
spelling |
Assessment of clinical trial quality and its impact on meta-analyses Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises Randomized controlled trialsQuality assurance^i2^shealthcQuestionnairesOutcome assessmentQuality controlEnsaios controlados aleatóriosGarantia de qualidade dos cuidados de saúdeQuestionáriosAvaliação de resultados^i1^scuidados de saControle de qualidade OBJETIVO: Analisar se diferentes instrumentos de avaliação de qualidade, aplicados a um grupo de estudos clínicos que se correlacionam e qual seu impacto no resultado na metanálise. MÉTODOS: Foram analisados 38 estudos clínicos randomizados e controlados, selecionados para a revisão sistemática sobre a eficácia terapêutica do Interferon Alfa no tratamento da hepatite crônica pelo vírus B. Utilizaram-se os seguintes instrumentos: Maastricht (M), Delphi (D) e Jadad (J) e o método da Colaboração Cochrane (CC), considerado padrão-ouro. Os resultados definidos pelos três instrumentos foram comparados pelo teste de Correlação de Spearman. O teste de Kappa (K) avaliou a concordância entre os revisores na aplicação dos instrumentos e o teste de Kappa ponderado analisou o ordenamento de qualidade definido pelos instrumentos. O clareamento do HBV-DNA e HbeAg foi o desfecho avaliado na metanálise. RESULTADOS: Os estudos foram de regular e baixa qualidade. A concordância entre os revisores foi, de acordo com o instrumento: D=0.12, J=0.29 e M=0.33 e CC= 0,53. A correlação foi moderada e homogênea (D/J=0,51; D/M=0,53 e J/M=0,52). Os resultados da metanálise (HBV-DNA), variaram de RR=0,71; IC 95%: 0,66-0,77 a RR=0,67; IC 95%: 0,58-0,79 e (HbeAg) de RR=0,85; IC 95%: 0,80-0,90 a RR=0,85; IC 95%:0,77-0,93, dependendo da qualidade dos estudos incluídos. CONCLUSÕES: Os instrumentos de avaliação de qualidade têm boa correlação. Nas revisões sistemáticas que apontem à mesma direção do efeito, a avaliação pode não alterar significantemente seu resultado. O método da Colaboração Cochrane é o mais reprodutível e de simples aplicação. OBJECTIVE: To evaluate whether different quality assessment tools applied to a group of clinical trials could be correlated, and what would be their impact on meta-analysis results. METHODS: Thirty-eight randomized controlled clinical trials were analyzed. These had been selected for a systematic review of the therapeutic efficacy of alpha interferon for treating chronic hepatitis B. The following tools were utilized: Maastricht (M), Delphi (D), Jadad (J) and the Cochrane Collaboration (CC) method (gold standard). The Spearman correlation coefficient was used to compare the results from the three methods. The Kappa test was used to assess the concordance between the reviewers in applying the tools, and the weighted Kappa test was applied to compare the quality ranking determined by the tools. The outcomes assessed in the meta-analyses were clearance of HBV-DNA and HBeAg. RESULTS: The studies presented regular to low quality. The concordance between reviewers varied according to the instrument utilized: D=0.12; J=0.29; M=0.33; and CC=0.53. The correlation was moderate and homogeneous (D/J=0.51; D/M=0.53; and J/M=0.52). Thje meta-analysis result relating to HBV-DNA ranged from RR=0.71 (95% CI: 0.66-0.77) to RR=0.67 (95% CI: 0.58-0.79). For HBeAg, the results ranged from RR=0.85 (95% CI: 0.80-0.90) to RR=0.85 ( 95% CI: 0.77-0.93). These results depended on the quality of the studies included. CONCLUSIONS: The quality assessment tools presented good correlation. In systematic reviews with the same direction of effect, the quality assessment may not significantly change the results. The Cochrane Collaboration method was the most reproducible method and easiest to apply. Universidade de São Paulo. Faculdade de Saúde Pública2005-12-01info:eu-repo/semantics/articleinfo:eu-repo/semantics/publishedVersionapplication/pdfapplication/pdfhttps://www.revistas.usp.br/rsp/article/view/3195210.1590/S0034-89102005000600001Revista de Saúde Pública; Vol. 39 No. 6 (2005); 865-873 Revista de Saúde Pública; Vol. 39 Núm. 6 (2005); 865-873 Revista de Saúde Pública; v. 39 n. 6 (2005); 865-873 1518-87870034-8910reponame:Revista de Saúde Públicainstname:Universidade de São Paulo (USP)instacron:USPporenghttps://www.revistas.usp.br/rsp/article/view/31952/33949https://www.revistas.usp.br/rsp/article/view/31952/33950Copyright (c) 2017 Revista de Saúde Públicainfo:eu-repo/semantics/openAccessSilva Filho, Carlos Rodrigues daSaconato, HumbertoConterno, Lucieni OliveiraMarques, IaraAtallah, Álvaro Nagib2012-07-08T22:48:20Zoai:revistas.usp.br:article/31952Revistahttps://www.revistas.usp.br/rsp/indexONGhttps://www.revistas.usp.br/rsp/oairevsp@org.usp.br||revsp1@usp.br1518-87870034-8910opendoar:2012-07-08T22:48:20Revista de Saúde Pública - Universidade de São Paulo (USP)false |
dc.title.none.fl_str_mv |
Assessment of clinical trial quality and its impact on meta-analyses Avaliação da qualidade de estudos clínicos e seu impacto nas metanálises |
title |
Assessment of clinical trial quality and its impact on meta-analyses |
spellingShingle |
Assessment of clinical trial quality and its impact on meta-analyses Silva Filho, Carlos Rodrigues da Randomized controlled trials Quality assurance^i2^shealthc Questionnaires Outcome assessment Quality control Ensaios controlados aleatórios Garantia de qualidade dos cuidados de saúde Questionários Avaliação de resultados^i1^scuidados de sa Controle de qualidade |
title_short |
Assessment of clinical trial quality and its impact on meta-analyses |
title_full |
Assessment of clinical trial quality and its impact on meta-analyses |
title_fullStr |
Assessment of clinical trial quality and its impact on meta-analyses |
title_full_unstemmed |
Assessment of clinical trial quality and its impact on meta-analyses |
title_sort |
Assessment of clinical trial quality and its impact on meta-analyses |
author |
Silva Filho, Carlos Rodrigues da |
author_facet |
Silva Filho, Carlos Rodrigues da Saconato, Humberto Conterno, Lucieni Oliveira Marques, Iara Atallah, Álvaro Nagib |
author_role |
author |
author2 |
Saconato, Humberto Conterno, Lucieni Oliveira Marques, Iara Atallah, Álvaro Nagib |
author2_role |
author author author author |
dc.contributor.author.fl_str_mv |
Silva Filho, Carlos Rodrigues da Saconato, Humberto Conterno, Lucieni Oliveira Marques, Iara Atallah, Álvaro Nagib |
dc.subject.por.fl_str_mv |
Randomized controlled trials Quality assurance^i2^shealthc Questionnaires Outcome assessment Quality control Ensaios controlados aleatórios Garantia de qualidade dos cuidados de saúde Questionários Avaliação de resultados^i1^scuidados de sa Controle de qualidade |
topic |
Randomized controlled trials Quality assurance^i2^shealthc Questionnaires Outcome assessment Quality control Ensaios controlados aleatórios Garantia de qualidade dos cuidados de saúde Questionários Avaliação de resultados^i1^scuidados de sa Controle de qualidade |
description |
OBJETIVO: Analisar se diferentes instrumentos de avaliação de qualidade, aplicados a um grupo de estudos clínicos que se correlacionam e qual seu impacto no resultado na metanálise. MÉTODOS: Foram analisados 38 estudos clínicos randomizados e controlados, selecionados para a revisão sistemática sobre a eficácia terapêutica do Interferon Alfa no tratamento da hepatite crônica pelo vírus B. Utilizaram-se os seguintes instrumentos: Maastricht (M), Delphi (D) e Jadad (J) e o método da Colaboração Cochrane (CC), considerado padrão-ouro. Os resultados definidos pelos três instrumentos foram comparados pelo teste de Correlação de Spearman. O teste de Kappa (K) avaliou a concordância entre os revisores na aplicação dos instrumentos e o teste de Kappa ponderado analisou o ordenamento de qualidade definido pelos instrumentos. O clareamento do HBV-DNA e HbeAg foi o desfecho avaliado na metanálise. RESULTADOS: Os estudos foram de regular e baixa qualidade. A concordância entre os revisores foi, de acordo com o instrumento: D=0.12, J=0.29 e M=0.33 e CC= 0,53. A correlação foi moderada e homogênea (D/J=0,51; D/M=0,53 e J/M=0,52). Os resultados da metanálise (HBV-DNA), variaram de RR=0,71; IC 95%: 0,66-0,77 a RR=0,67; IC 95%: 0,58-0,79 e (HbeAg) de RR=0,85; IC 95%: 0,80-0,90 a RR=0,85; IC 95%:0,77-0,93, dependendo da qualidade dos estudos incluídos. CONCLUSÕES: Os instrumentos de avaliação de qualidade têm boa correlação. Nas revisões sistemáticas que apontem à mesma direção do efeito, a avaliação pode não alterar significantemente seu resultado. O método da Colaboração Cochrane é o mais reprodutível e de simples aplicação. |
publishDate |
2005 |
dc.date.none.fl_str_mv |
2005-12-01 |
dc.type.driver.fl_str_mv |
info:eu-repo/semantics/article info:eu-repo/semantics/publishedVersion |
format |
article |
status_str |
publishedVersion |
dc.identifier.uri.fl_str_mv |
https://www.revistas.usp.br/rsp/article/view/31952 10.1590/S0034-89102005000600001 |
url |
https://www.revistas.usp.br/rsp/article/view/31952 |
identifier_str_mv |
10.1590/S0034-89102005000600001 |
dc.language.iso.fl_str_mv |
por eng |
language |
por eng |
dc.relation.none.fl_str_mv |
https://www.revistas.usp.br/rsp/article/view/31952/33949 https://www.revistas.usp.br/rsp/article/view/31952/33950 |
dc.rights.driver.fl_str_mv |
Copyright (c) 2017 Revista de Saúde Pública info:eu-repo/semantics/openAccess |
rights_invalid_str_mv |
Copyright (c) 2017 Revista de Saúde Pública |
eu_rights_str_mv |
openAccess |
dc.format.none.fl_str_mv |
application/pdf application/pdf |
dc.publisher.none.fl_str_mv |
Universidade de São Paulo. Faculdade de Saúde Pública |
publisher.none.fl_str_mv |
Universidade de São Paulo. Faculdade de Saúde Pública |
dc.source.none.fl_str_mv |
Revista de Saúde Pública; Vol. 39 No. 6 (2005); 865-873 Revista de Saúde Pública; Vol. 39 Núm. 6 (2005); 865-873 Revista de Saúde Pública; v. 39 n. 6 (2005); 865-873 1518-8787 0034-8910 reponame:Revista de Saúde Pública instname:Universidade de São Paulo (USP) instacron:USP |
instname_str |
Universidade de São Paulo (USP) |
instacron_str |
USP |
institution |
USP |
reponame_str |
Revista de Saúde Pública |
collection |
Revista de Saúde Pública |
repository.name.fl_str_mv |
Revista de Saúde Pública - Universidade de São Paulo (USP) |
repository.mail.fl_str_mv |
revsp@org.usp.br||revsp1@usp.br |
_version_ |
1800221783788355584 |