Validação externa de modelos de predição de pneumonia pós cirurgia cardíaca
Autor(a) principal: | |
---|---|
Data de Publicação: | 2010 |
Tipo de documento: | Tese |
Idioma: | por |
Título da fonte: | Biblioteca Digital de Teses e Dissertações da UERJ |
Texto Completo: | http://www.bdtd.uerj.br/handle/1/4818 |
Resumo: | This study concerns the external validation of a prediction model for pneumonias after cardiac surgery. It also presents a review of methods and techniques for critical appraisal and performance assessment of clinical predictive models and nomogram applications. Methods: A consecutive series of 527 patients who underwent cardiac surgeries between June 2000 and August 2002 was used to develop a prognostic model.. Multiple logistic regression analysis was performed to predict the occurrence of pneumonia. Diverse simple and conventional preoperative risk factors were evaluated. The model was internal validated with bootstrap. A nomogram was developed to enhance clinical applicability. The performance was evaluated by calibration, discrimination and global measures. Prospective study was done to validate models predicting pneumonia after cardiac surgery with 333 adult patients who underwent cardiac surgery from October 2006 to May 2007. Previously constructed logistic regression (LRM) and classification and regression tree (CART) models were validated with external data. Results: a simple nomogram model was developed and showing low discrimination and good calibration (AUC 0.79, Brier score 0.064, discrimination slope 0.13, Hosmer-Lemeshow p=0.27). Pneumonia occurred in 7.5% of patients in the external validation set. LRM performed better with moderate discrimination (R2 7.1%, Brier=0.06, AROC=0.694) and calibration (Hosmer-Lemeshow P=0.08). Conclusions: Overall agreement between the predicted probabilities and observed frequencies was good in the development and the internal validation set. The nomogram predicts the probability of pneumonia for individual patients and may help in informing patients and surgeons before undergoing cardiac surgery. We validated a model that can identify which patients undergoing cardiac surgery are at high risk for pneumonia. CART performs well in derivation, and looses more discrimination and calibration than LRM in the validation set. |
id |
UERJ_6cdaf447c94537c425d24496f16f862b |
---|---|
oai_identifier_str |
oai:www.bdtd.uerj.br:1/4818 |
network_acronym_str |
UERJ |
network_name_str |
Biblioteca Digital de Teses e Dissertações da UERJ |
repository_id_str |
2903 |
spelling |
Braga, Jose Uelereshttp://lattes.cnpq.br/6027675934625064Barroso, Paulo Feijóhttp://lattes.cnpq.br/6126740128198607Costa, Antonio José Lealhttp://lattes.cnpq.br/8717846472721574Mendonça, Gulnar Azevedo e Silvahttp://lattes.cnpq.br/5225298757437978Werneck, Guilherme Loureirohttp://lattes.cnpq.br/7331062615542814http://lattes.cnpq.br/7445955509219546Santos, Marisa da Silva2020-08-02T16:56:03Z2010-10-072010-04-06SANTOS, Marisa da Silva. Validação externa de modelos de predição de pneumonia pós cirurgia cardíaca. 2010. 92 f. Tese (Doutorado em Ciências Humanas e Saúde; Epidemiologia; Política, Planejamento e Administração em Saúde; Administra) - Universidade do Estado do Rio de Janeiro, Rio de Janeiro, 2010.http://www.bdtd.uerj.br/handle/1/4818This study concerns the external validation of a prediction model for pneumonias after cardiac surgery. It also presents a review of methods and techniques for critical appraisal and performance assessment of clinical predictive models and nomogram applications. Methods: A consecutive series of 527 patients who underwent cardiac surgeries between June 2000 and August 2002 was used to develop a prognostic model.. Multiple logistic regression analysis was performed to predict the occurrence of pneumonia. Diverse simple and conventional preoperative risk factors were evaluated. The model was internal validated with bootstrap. A nomogram was developed to enhance clinical applicability. The performance was evaluated by calibration, discrimination and global measures. Prospective study was done to validate models predicting pneumonia after cardiac surgery with 333 adult patients who underwent cardiac surgery from October 2006 to May 2007. Previously constructed logistic regression (LRM) and classification and regression tree (CART) models were validated with external data. Results: a simple nomogram model was developed and showing low discrimination and good calibration (AUC 0.79, Brier score 0.064, discrimination slope 0.13, Hosmer-Lemeshow p=0.27). Pneumonia occurred in 7.5% of patients in the external validation set. LRM performed better with moderate discrimination (R2 7.1%, Brier=0.06, AROC=0.694) and calibration (Hosmer-Lemeshow P=0.08). Conclusions: Overall agreement between the predicted probabilities and observed frequencies was good in the development and the internal validation set. The nomogram predicts the probability of pneumonia for individual patients and may help in informing patients and surgeons before undergoing cardiac surgery. We validated a model that can identify which patients undergoing cardiac surgery are at high risk for pneumonia. CART performs well in derivation, and looses more discrimination and calibration than LRM in the validation set.Este trabalho versa sobre a validação externa de um modelo para predição de pneumonias em pacientes submetidos a cirurgias cardíacas. Também apresenta uma revisão dos métodos e técnicas para análise crítica e avaliação de desempenho dos modelos preditivos em medicina e discorre sobre aplicações do nomograma. Método: Dados de uma série de 527 pacientes, consecutivamente submetidos a cirurgias cardíacas entre Junho de 2000 e Agosto de 2002, foram utilizados para desenvolver os modelos de prognósticos. Foram realizadas análise de regressão logística múltipla e árvore de classificação e regressão (CART) para identificar fatores preditivos para a ocorrência de pneumonia. Diversos fatores de risco simples e convencionais pré-operatórios foram avaliados. Os modelos foram validados internamente com um método de bootstrap Um nomograma foi desenvolvido para melhorar a aplicabilidade clínica. O desempenho do nomograma foi avaliado por meio de medidas de calibração, discriminação e indicadores globais. Em uma segunda etapa estudo em um hospital público foi realizado com 333 pacientes adultos submetidos a cirurgias cardíacas entre Outubro de 2006 e Maio de 2007. Modelos construídos previamente por meio de regressão logística (LRM) e árvore de classificação e regressão (CART) foram validados com dados externos. Resultados: Um modelo de nomograma simples foi desenvolvido e validado internamente, mostrando discriminação moderada e boa calibração (AUC 0,79; escore Brier 0,064, ângulo de discriminação 0,13; Hosmer-Lemeshow p = 0,27). Pneumonia ocorreu em 7,6% dos pacientes da amostra de validação externa. LRM apresentou melhor desempenho com baixa discriminação (R2 7,1%, Brier=0,06, AUC=0,694) e com calibração adequada (Hosmer-Lemeshow p=0,08). Conclusões: As probabilidades preditas mostraram concordância global com a freqüência observada de pneumonia após cirurgia cardíaca. O nomograma forneceu uma predição satisfatória da probabilidade de pneumonia. Sua aplicabilidade para o uso clínico pode facilitar a informação do paciente e do cirurgião antes da cirurgia cardíaca. Foi validado externamente um modelo capaz de identificar pacientes de alto risco para pneumonia submetidos à cirurgias cardíacas. CART apresentou um bom desempenho na derivação e maiores perdas do que LRM, quanto à discriminação e calibração, na amostra de validação.Submitted by Boris Flegr (boris@uerj.br) on 2020-08-02T16:56:03Z No. of bitstreams: 1 Santos, Marisa - Tese completa.pdf: 1389791 bytes, checksum: 322246c3149fa65d3446b502aa6373fc (MD5)Made available in DSpace on 2020-08-02T16:56:03Z (GMT). No. of bitstreams: 1 Santos, Marisa - Tese completa.pdf: 1389791 bytes, checksum: 322246c3149fa65d3446b502aa6373fc (MD5) Previous issue date: 2010-04-06application/pdfporUniversidade do Estado do Rio de JaneiroPrograma de Pós-Graduação em Saúde ColetivaUERJBRCentro Biomédico::Instituto de Medicina SocialValidation studiesEpidemiologic methodsPrediction modelsCardiac surgical proceduresPneumoniaMétodos epidemiológicosModelos de prediçãoEstudos de validaçãoCNPQ::CIENCIAS DA SAUDE::SAUDE COLETIVAValidação externa de modelos de predição de pneumonia pós cirurgia cardíacaExternal validation of prediction models for pneumonia after cardiac surgeryinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesisinfo:eu-repo/semantics/openAccessreponame:Biblioteca Digital de Teses e Dissertações da UERJinstname:Universidade do Estado do Rio de Janeiro (UERJ)instacron:UERJORIGINALSantos, Marisa - Tese completa.pdfapplication/pdf1389791http://www.bdtd.uerj.br/bitstream/1/4818/1/Santos%2C+Marisa+-+Tese+completa.pdf322246c3149fa65d3446b502aa6373fcMD511/48182024-02-26 20:21:05.623oai:www.bdtd.uerj.br:1/4818Biblioteca Digital de Teses e Dissertaçõeshttp://www.bdtd.uerj.br/PUBhttps://www.bdtd.uerj.br:8443/oai/requestbdtd.suporte@uerj.bropendoar:29032024-02-26T23:21:05Biblioteca Digital de Teses e Dissertações da UERJ - Universidade do Estado do Rio de Janeiro (UERJ)false |
dc.title.por.fl_str_mv |
Validação externa de modelos de predição de pneumonia pós cirurgia cardíaca |
dc.title.alternative.eng.fl_str_mv |
External validation of prediction models for pneumonia after cardiac surgery |
title |
Validação externa de modelos de predição de pneumonia pós cirurgia cardíaca |
spellingShingle |
Validação externa de modelos de predição de pneumonia pós cirurgia cardíaca Santos, Marisa da Silva Validation studies Epidemiologic methods Prediction models Cardiac surgical procedures Pneumonia Métodos epidemiológicos Modelos de predição Estudos de validação CNPQ::CIENCIAS DA SAUDE::SAUDE COLETIVA |
title_short |
Validação externa de modelos de predição de pneumonia pós cirurgia cardíaca |
title_full |
Validação externa de modelos de predição de pneumonia pós cirurgia cardíaca |
title_fullStr |
Validação externa de modelos de predição de pneumonia pós cirurgia cardíaca |
title_full_unstemmed |
Validação externa de modelos de predição de pneumonia pós cirurgia cardíaca |
title_sort |
Validação externa de modelos de predição de pneumonia pós cirurgia cardíaca |
author |
Santos, Marisa da Silva |
author_facet |
Santos, Marisa da Silva |
author_role |
author |
dc.contributor.advisor1.fl_str_mv |
Braga, Jose Ueleres |
dc.contributor.advisor1Lattes.fl_str_mv |
http://lattes.cnpq.br/6027675934625064 |
dc.contributor.referee1.fl_str_mv |
Barroso, Paulo Feijó |
dc.contributor.referee1Lattes.fl_str_mv |
http://lattes.cnpq.br/6126740128198607 |
dc.contributor.referee2.fl_str_mv |
Costa, Antonio José Leal |
dc.contributor.referee2Lattes.fl_str_mv |
http://lattes.cnpq.br/8717846472721574 |
dc.contributor.referee3.fl_str_mv |
Mendonça, Gulnar Azevedo e Silva |
dc.contributor.referee3Lattes.fl_str_mv |
http://lattes.cnpq.br/5225298757437978 |
dc.contributor.referee4.fl_str_mv |
Werneck, Guilherme Loureiro |
dc.contributor.referee4Lattes.fl_str_mv |
http://lattes.cnpq.br/7331062615542814 |
dc.contributor.authorLattes.fl_str_mv |
http://lattes.cnpq.br/7445955509219546 |
dc.contributor.author.fl_str_mv |
Santos, Marisa da Silva |
contributor_str_mv |
Braga, Jose Ueleres Barroso, Paulo Feijó Costa, Antonio José Leal Mendonça, Gulnar Azevedo e Silva Werneck, Guilherme Loureiro |
dc.subject.eng.fl_str_mv |
Validation studies Epidemiologic methods Prediction models Cardiac surgical procedures |
topic |
Validation studies Epidemiologic methods Prediction models Cardiac surgical procedures Pneumonia Métodos epidemiológicos Modelos de predição Estudos de validação CNPQ::CIENCIAS DA SAUDE::SAUDE COLETIVA |
dc.subject.por.fl_str_mv |
Pneumonia Métodos epidemiológicos Modelos de predição Estudos de validação |
dc.subject.cnpq.fl_str_mv |
CNPQ::CIENCIAS DA SAUDE::SAUDE COLETIVA |
description |
This study concerns the external validation of a prediction model for pneumonias after cardiac surgery. It also presents a review of methods and techniques for critical appraisal and performance assessment of clinical predictive models and nomogram applications. Methods: A consecutive series of 527 patients who underwent cardiac surgeries between June 2000 and August 2002 was used to develop a prognostic model.. Multiple logistic regression analysis was performed to predict the occurrence of pneumonia. Diverse simple and conventional preoperative risk factors were evaluated. The model was internal validated with bootstrap. A nomogram was developed to enhance clinical applicability. The performance was evaluated by calibration, discrimination and global measures. Prospective study was done to validate models predicting pneumonia after cardiac surgery with 333 adult patients who underwent cardiac surgery from October 2006 to May 2007. Previously constructed logistic regression (LRM) and classification and regression tree (CART) models were validated with external data. Results: a simple nomogram model was developed and showing low discrimination and good calibration (AUC 0.79, Brier score 0.064, discrimination slope 0.13, Hosmer-Lemeshow p=0.27). Pneumonia occurred in 7.5% of patients in the external validation set. LRM performed better with moderate discrimination (R2 7.1%, Brier=0.06, AROC=0.694) and calibration (Hosmer-Lemeshow P=0.08). Conclusions: Overall agreement between the predicted probabilities and observed frequencies was good in the development and the internal validation set. The nomogram predicts the probability of pneumonia for individual patients and may help in informing patients and surgeons before undergoing cardiac surgery. We validated a model that can identify which patients undergoing cardiac surgery are at high risk for pneumonia. CART performs well in derivation, and looses more discrimination and calibration than LRM in the validation set. |
publishDate |
2010 |
dc.date.available.fl_str_mv |
2010-10-07 |
dc.date.issued.fl_str_mv |
2010-04-06 |
dc.date.accessioned.fl_str_mv |
2020-08-02T16:56:03Z |
dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
dc.type.driver.fl_str_mv |
info:eu-repo/semantics/doctoralThesis |
format |
doctoralThesis |
status_str |
publishedVersion |
dc.identifier.citation.fl_str_mv |
SANTOS, Marisa da Silva. Validação externa de modelos de predição de pneumonia pós cirurgia cardíaca. 2010. 92 f. Tese (Doutorado em Ciências Humanas e Saúde; Epidemiologia; Política, Planejamento e Administração em Saúde; Administra) - Universidade do Estado do Rio de Janeiro, Rio de Janeiro, 2010. |
dc.identifier.uri.fl_str_mv |
http://www.bdtd.uerj.br/handle/1/4818 |
identifier_str_mv |
SANTOS, Marisa da Silva. Validação externa de modelos de predição de pneumonia pós cirurgia cardíaca. 2010. 92 f. Tese (Doutorado em Ciências Humanas e Saúde; Epidemiologia; Política, Planejamento e Administração em Saúde; Administra) - Universidade do Estado do Rio de Janeiro, Rio de Janeiro, 2010. |
url |
http://www.bdtd.uerj.br/handle/1/4818 |
dc.language.iso.fl_str_mv |
por |
language |
por |
dc.rights.driver.fl_str_mv |
info:eu-repo/semantics/openAccess |
eu_rights_str_mv |
openAccess |
dc.format.none.fl_str_mv |
application/pdf |
dc.publisher.none.fl_str_mv |
Universidade do Estado do Rio de Janeiro |
dc.publisher.program.fl_str_mv |
Programa de Pós-Graduação em Saúde Coletiva |
dc.publisher.initials.fl_str_mv |
UERJ |
dc.publisher.country.fl_str_mv |
BR |
dc.publisher.department.fl_str_mv |
Centro Biomédico::Instituto de Medicina Social |
publisher.none.fl_str_mv |
Universidade do Estado do Rio de Janeiro |
dc.source.none.fl_str_mv |
reponame:Biblioteca Digital de Teses e Dissertações da UERJ instname:Universidade do Estado do Rio de Janeiro (UERJ) instacron:UERJ |
instname_str |
Universidade do Estado do Rio de Janeiro (UERJ) |
instacron_str |
UERJ |
institution |
UERJ |
reponame_str |
Biblioteca Digital de Teses e Dissertações da UERJ |
collection |
Biblioteca Digital de Teses e Dissertações da UERJ |
bitstream.url.fl_str_mv |
http://www.bdtd.uerj.br/bitstream/1/4818/1/Santos%2C+Marisa+-+Tese+completa.pdf |
bitstream.checksum.fl_str_mv |
322246c3149fa65d3446b502aa6373fc |
bitstream.checksumAlgorithm.fl_str_mv |
MD5 |
repository.name.fl_str_mv |
Biblioteca Digital de Teses e Dissertações da UERJ - Universidade do Estado do Rio de Janeiro (UERJ) |
repository.mail.fl_str_mv |
bdtd.suporte@uerj.br |
_version_ |
1792352263732199424 |