A incompatibilidade entre aleatorização na experimentação e análise estatística como um possível fator na crise de reprodutibilidade científica
Autor(a) principal: | |
---|---|
Data de Publicação: | 2018 |
Tipo de documento: | Trabalho de conclusão de curso |
Idioma: | por |
Título da fonte: | Repositório Institucional da UFRN |
Texto Completo: | https://repositorio.ufrn.br/handle/123456789/34290 |
Resumo: | As ciências biomédicas tem como objetivo essencial identificar alvos, potencialmente, terapêuticos para o desenvolvimento de novos tratamentos para enfermidades humanas. Entretanto, o êxito translacional tem sido contestado. Além disso, os resultados publicados, em sua maioria, acabam não sendo reproduzidos, o que rende o status de crise de reprodutibilidade. Em geral, os efeitos mostram-se superestimados. Este cenário compromete montantes vultuosos investidos em pesquisa pré-clínica de conclusões equivocadas. Levantamentos recentes têm indicado a displicência com o método científico e a inconsistência estatística como causas da não reprodutibilidade. É digno de nota a ausência da aleatorização nos relatos experimentais. Apesar de raramente empregada nos experimentos pré-clínicos, a aleatorização é fundamental para determinar a distribuição das estatística de teste de um teste de hipótese. Nesse contexto, o presente estudo tem por objetivo investigar os efeitos de desconsiderar restrições da aleatorização sobre as probabilidades de erro tipo I e tipo II. Para estudar o nível de significância, foram simuladas amostras de um experimento fatorial 22 com estrutura de correlação de parcelas subdivididas em diferentes cenários (de número de réplicas, variância do erro da subparcela e correlação distintos). Então, o nível de significância verdadeiro foi estimado como a proporção de amostras geradas sob H0, cuja hipótese nula foi rejeitada. Deste modo, observou-se que desconsiderar a restrição na aleatorização (i.e., analisar como completamente aleatorizado) implica em nível de significância referente ao efeito do fator de parcela maior do que o valor nominal informado pelo teste. Por outro lado, o nível de significância associado ao efeito do fator de subparcela mostra-se menor do que o valor nominal do teste. Como o poder do teste F da ANOVA é uma função do parâmetro de não centralidade e este depende dos fatores controlados na simulação, o poder pôde ser calculado para cada cenário. Deste modo, observou-se que desconsiderar a aleatorização (i.e., analisar como completamente aleatorizado) atribui poder de análise ao efeito da parcela artificialmente maior. Por sua vez, o poder do teste associado à subparcela é menor, quando a aleatorização completa é assumida. Esses resultados foram ratificados por simulação. Deste modo, conclui-se que assumir aleatorização completa diante de estrutura de correlação de parcelas subdivididas aumenta o risco de falso alarme quanto ao efeito do fator de parcela, bem como aumenta a probabilidade de falso negativo do efeito do fator atribuído à subparcela. Assim, por meio desse exemplo, entende-se que a incompatibilidade da análise estatística em relação a aleatorização na execução do experimento configura um fator potencialmente agravante da baixa reprodutibilidade na ciência. |
id |
UFRN_90437a4d6c75f3b87be77547e5580615 |
---|---|
oai_identifier_str |
oai:https://repositorio.ufrn.br:123456789/34290 |
network_acronym_str |
UFRN |
network_name_str |
Repositório Institucional da UFRN |
repository_id_str |
|
spelling |
Lima, Thiago ZaqueuVivacqua, Carla AlmeidaSilva, Damião Nóbrega daPinho, André Luís Santos de2018-12-26T11:45:59Z2021-09-20T12:08:44Z2018-12-26T11:45:59Z2021-09-20T12:08:44Z2018-12-0420160003134LIMA, Thiago Zaqueu. A incompatibilidade entre aleatorização na experimentação e análise estatística como um possível fator na crise de reprodutibilidade científica. 2018. 56f. Trabalho de Conclusão de Curso (Graduação em Estatística) - Departamento de Estatística, Universidade Federal do Rio Grande do Norte, Natal, 2018.https://repositorio.ufrn.br/handle/123456789/34290Universidade Federal do Rio Grande do NorteUFRNBrasilEstatísticaAttribution-NonCommercial-NoDerivs 3.0 Brazilhttp://creativecommons.org/licenses/by-nc-nd/3.0/br/info:eu-repo/semantics/openAccessReprodutibilidadeAleatorizaçãoNível de significânciaPoder do testeA incompatibilidade entre aleatorização na experimentação e análise estatística como um possível fator na crise de reprodutibilidade científicainfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/bachelorThesisAs ciências biomédicas tem como objetivo essencial identificar alvos, potencialmente, terapêuticos para o desenvolvimento de novos tratamentos para enfermidades humanas. Entretanto, o êxito translacional tem sido contestado. Além disso, os resultados publicados, em sua maioria, acabam não sendo reproduzidos, o que rende o status de crise de reprodutibilidade. Em geral, os efeitos mostram-se superestimados. Este cenário compromete montantes vultuosos investidos em pesquisa pré-clínica de conclusões equivocadas. Levantamentos recentes têm indicado a displicência com o método científico e a inconsistência estatística como causas da não reprodutibilidade. É digno de nota a ausência da aleatorização nos relatos experimentais. Apesar de raramente empregada nos experimentos pré-clínicos, a aleatorização é fundamental para determinar a distribuição das estatística de teste de um teste de hipótese. Nesse contexto, o presente estudo tem por objetivo investigar os efeitos de desconsiderar restrições da aleatorização sobre as probabilidades de erro tipo I e tipo II. Para estudar o nível de significância, foram simuladas amostras de um experimento fatorial 22 com estrutura de correlação de parcelas subdivididas em diferentes cenários (de número de réplicas, variância do erro da subparcela e correlação distintos). Então, o nível de significância verdadeiro foi estimado como a proporção de amostras geradas sob H0, cuja hipótese nula foi rejeitada. Deste modo, observou-se que desconsiderar a restrição na aleatorização (i.e., analisar como completamente aleatorizado) implica em nível de significância referente ao efeito do fator de parcela maior do que o valor nominal informado pelo teste. Por outro lado, o nível de significância associado ao efeito do fator de subparcela mostra-se menor do que o valor nominal do teste. Como o poder do teste F da ANOVA é uma função do parâmetro de não centralidade e este depende dos fatores controlados na simulação, o poder pôde ser calculado para cada cenário. Deste modo, observou-se que desconsiderar a aleatorização (i.e., analisar como completamente aleatorizado) atribui poder de análise ao efeito da parcela artificialmente maior. Por sua vez, o poder do teste associado à subparcela é menor, quando a aleatorização completa é assumida. Esses resultados foram ratificados por simulação. Deste modo, conclui-se que assumir aleatorização completa diante de estrutura de correlação de parcelas subdivididas aumenta o risco de falso alarme quanto ao efeito do fator de parcela, bem como aumenta a probabilidade de falso negativo do efeito do fator atribuído à subparcela. Assim, por meio desse exemplo, entende-se que a incompatibilidade da análise estatística em relação a aleatorização na execução do experimento configura um fator potencialmente agravante da baixa reprodutibilidade na ciência.porreponame:Repositório Institucional da UFRNinstname:Universidade Federal do Rio Grande do Norte (UFRN)instacron:UFRNTEXTReprodutibilidade_Lima_2018.pdf.txtExtracted texttext/plain97111https://repositorio.ufrn.br/bitstream/123456789/34290/1/Reprodutibilidade_Lima_2018.pdf.txta375600597f6c7969a71988a5755e6deMD51LICENSElicense.txttext/plain714https://repositorio.ufrn.br/bitstream/123456789/34290/2/license.txt7278bab9c5c886812fa7d225dc807888MD52ORIGINALIncompatibilidadeAleatorizacaoExperimentacao_Lima_2018.pdfapplication/pdf1178305https://repositorio.ufrn.br/bitstream/123456789/34290/3/IncompatibilidadeAleatorizacaoExperimentacao_Lima_2018.pdf111b51059b80b46646801783cb0c2fd8MD53CC-LICENSElicense_rdfapplication/octet-stream811https://repositorio.ufrn.br/bitstream/123456789/34290/4/license_rdfe39d27027a6cc9cb039ad269a5db8e34MD54123456789/342902023-01-09 15:21:01.51oai:https://repositorio.ufrn.br:123456789/34290PGNlbnRlcj48c3Ryb25nPkZFREVSQUwgVU5JVkVSU0lUWSBPRiBSSU8gR1JBTkRFIERPIE5PUlRFPC9zdHJvbmc+PC9jZW50ZXI+CjxjZW50ZXI+PHN0cm9uZz5ESUdJVEFMIE1PTk9HUkFQSFMgTElCUkFSWTwvc3Ryb25nPjwvY2VudGVyPgoKPGNlbnRlcj5BdXRob3JpemF0aW9uIFRlcm0gZm9yIHRoZSBhdmFpbGFiaWxpdHkgb2YgTW9ub2dyYXBocyBmb3IgVW5kZXJncmFkdWF0ZSBhbmQgU3BlY2lhbGl6YXRpb24gaW4gdGhlIERpZ2l0YWwgTGlicmFyeSBvZiBNb25vZ3JhcGhzIChCRE0pPC9jZW50ZXI+CgpBcyB0aGUgY29weXJpZ2h0IG93bmVyIG9mIHRoZSBtb25vZ3JhcGgsIEkgYXV0aG9yaXplIHRoZSBGZWRlcmFsIFVuaXZlcnNpdHkgb2YgUmlvIEdyYW5kZSBkbyBOb3J0ZSAoVUZSTikgdG8gbWFrZSBhdmFpbGFibGUgdGhyb3VnaCB0aGUgRGlnaXRhbCBMaWJyYXJ5IG9mIE1vbm9ncmFwaHMgb2YgVUZSTiwgd2l0aG91dCByZWltYnVyc2VtZW50IG9mIGNvcHlyaWdodCwgYWNjb3JkaW5nIHRvIExhdyA5NjEwLzk4ICwgdGhlIGZ1bGwgdGV4dCBvZiB0aGUgd29yayBzdWJtaXR0ZWQgZm9yIHRoZSBwdXJwb3NlIG9mIHJlYWRpbmcsIHByaW50aW5nIGFuZCAvIG9yIGRvd25sb2FkaW5nLCBhcyBhIG1lYW5zIG9mIGRpc3NlbWluYXRpbmcgQnJhemlsaWFuIHNjaWVudGlmaWMgcHJvZHVjdGlvbiwgYXMgb2YgdGhlIGRhdGUgb2Ygc3VibWlzc2lvbi4KRepositório de PublicaçõesPUBhttp://repositorio.ufrn.br/oai/opendoar:2023-01-09T18:21:01Repositório Institucional da UFRN - Universidade Federal do Rio Grande do Norte (UFRN)false |
dc.title.pt_BR.fl_str_mv |
A incompatibilidade entre aleatorização na experimentação e análise estatística como um possível fator na crise de reprodutibilidade científica |
title |
A incompatibilidade entre aleatorização na experimentação e análise estatística como um possível fator na crise de reprodutibilidade científica |
spellingShingle |
A incompatibilidade entre aleatorização na experimentação e análise estatística como um possível fator na crise de reprodutibilidade científica Lima, Thiago Zaqueu Reprodutibilidade Aleatorização Nível de significância Poder do teste |
title_short |
A incompatibilidade entre aleatorização na experimentação e análise estatística como um possível fator na crise de reprodutibilidade científica |
title_full |
A incompatibilidade entre aleatorização na experimentação e análise estatística como um possível fator na crise de reprodutibilidade científica |
title_fullStr |
A incompatibilidade entre aleatorização na experimentação e análise estatística como um possível fator na crise de reprodutibilidade científica |
title_full_unstemmed |
A incompatibilidade entre aleatorização na experimentação e análise estatística como um possível fator na crise de reprodutibilidade científica |
title_sort |
A incompatibilidade entre aleatorização na experimentação e análise estatística como um possível fator na crise de reprodutibilidade científica |
author |
Lima, Thiago Zaqueu |
author_facet |
Lima, Thiago Zaqueu |
author_role |
author |
dc.contributor.referees1.none.fl_str_mv |
Vivacqua, Carla Almeida |
dc.contributor.referees2.none.fl_str_mv |
Silva, Damião Nóbrega da |
dc.contributor.author.fl_str_mv |
Lima, Thiago Zaqueu |
dc.contributor.advisor1.fl_str_mv |
Pinho, André Luís Santos de |
contributor_str_mv |
Pinho, André Luís Santos de |
dc.subject.por.fl_str_mv |
Reprodutibilidade Aleatorização Nível de significância Poder do teste |
topic |
Reprodutibilidade Aleatorização Nível de significância Poder do teste |
description |
As ciências biomédicas tem como objetivo essencial identificar alvos, potencialmente, terapêuticos para o desenvolvimento de novos tratamentos para enfermidades humanas. Entretanto, o êxito translacional tem sido contestado. Além disso, os resultados publicados, em sua maioria, acabam não sendo reproduzidos, o que rende o status de crise de reprodutibilidade. Em geral, os efeitos mostram-se superestimados. Este cenário compromete montantes vultuosos investidos em pesquisa pré-clínica de conclusões equivocadas. Levantamentos recentes têm indicado a displicência com o método científico e a inconsistência estatística como causas da não reprodutibilidade. É digno de nota a ausência da aleatorização nos relatos experimentais. Apesar de raramente empregada nos experimentos pré-clínicos, a aleatorização é fundamental para determinar a distribuição das estatística de teste de um teste de hipótese. Nesse contexto, o presente estudo tem por objetivo investigar os efeitos de desconsiderar restrições da aleatorização sobre as probabilidades de erro tipo I e tipo II. Para estudar o nível de significância, foram simuladas amostras de um experimento fatorial 22 com estrutura de correlação de parcelas subdivididas em diferentes cenários (de número de réplicas, variância do erro da subparcela e correlação distintos). Então, o nível de significância verdadeiro foi estimado como a proporção de amostras geradas sob H0, cuja hipótese nula foi rejeitada. Deste modo, observou-se que desconsiderar a restrição na aleatorização (i.e., analisar como completamente aleatorizado) implica em nível de significância referente ao efeito do fator de parcela maior do que o valor nominal informado pelo teste. Por outro lado, o nível de significância associado ao efeito do fator de subparcela mostra-se menor do que o valor nominal do teste. Como o poder do teste F da ANOVA é uma função do parâmetro de não centralidade e este depende dos fatores controlados na simulação, o poder pôde ser calculado para cada cenário. Deste modo, observou-se que desconsiderar a aleatorização (i.e., analisar como completamente aleatorizado) atribui poder de análise ao efeito da parcela artificialmente maior. Por sua vez, o poder do teste associado à subparcela é menor, quando a aleatorização completa é assumida. Esses resultados foram ratificados por simulação. Deste modo, conclui-se que assumir aleatorização completa diante de estrutura de correlação de parcelas subdivididas aumenta o risco de falso alarme quanto ao efeito do fator de parcela, bem como aumenta a probabilidade de falso negativo do efeito do fator atribuído à subparcela. Assim, por meio desse exemplo, entende-se que a incompatibilidade da análise estatística em relação a aleatorização na execução do experimento configura um fator potencialmente agravante da baixa reprodutibilidade na ciência. |
publishDate |
2018 |
dc.date.accessioned.fl_str_mv |
2018-12-26T11:45:59Z 2021-09-20T12:08:44Z |
dc.date.available.fl_str_mv |
2018-12-26T11:45:59Z 2021-09-20T12:08:44Z |
dc.date.issued.fl_str_mv |
2018-12-04 |
dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
dc.type.driver.fl_str_mv |
info:eu-repo/semantics/bachelorThesis |
format |
bachelorThesis |
status_str |
publishedVersion |
dc.identifier.pt_BR.fl_str_mv |
20160003134 |
dc.identifier.citation.fl_str_mv |
LIMA, Thiago Zaqueu. A incompatibilidade entre aleatorização na experimentação e análise estatística como um possível fator na crise de reprodutibilidade científica. 2018. 56f. Trabalho de Conclusão de Curso (Graduação em Estatística) - Departamento de Estatística, Universidade Federal do Rio Grande do Norte, Natal, 2018. |
dc.identifier.uri.fl_str_mv |
https://repositorio.ufrn.br/handle/123456789/34290 |
identifier_str_mv |
20160003134 LIMA, Thiago Zaqueu. A incompatibilidade entre aleatorização na experimentação e análise estatística como um possível fator na crise de reprodutibilidade científica. 2018. 56f. Trabalho de Conclusão de Curso (Graduação em Estatística) - Departamento de Estatística, Universidade Federal do Rio Grande do Norte, Natal, 2018. |
url |
https://repositorio.ufrn.br/handle/123456789/34290 |
dc.language.iso.fl_str_mv |
por |
language |
por |
dc.rights.driver.fl_str_mv |
Attribution-NonCommercial-NoDerivs 3.0 Brazil http://creativecommons.org/licenses/by-nc-nd/3.0/br/ info:eu-repo/semantics/openAccess |
rights_invalid_str_mv |
Attribution-NonCommercial-NoDerivs 3.0 Brazil http://creativecommons.org/licenses/by-nc-nd/3.0/br/ |
eu_rights_str_mv |
openAccess |
dc.publisher.none.fl_str_mv |
Universidade Federal do Rio Grande do Norte |
dc.publisher.initials.fl_str_mv |
UFRN |
dc.publisher.country.fl_str_mv |
Brasil |
dc.publisher.department.fl_str_mv |
Estatística |
publisher.none.fl_str_mv |
Universidade Federal do Rio Grande do Norte |
dc.source.none.fl_str_mv |
reponame:Repositório Institucional da UFRN instname:Universidade Federal do Rio Grande do Norte (UFRN) instacron:UFRN |
instname_str |
Universidade Federal do Rio Grande do Norte (UFRN) |
instacron_str |
UFRN |
institution |
UFRN |
reponame_str |
Repositório Institucional da UFRN |
collection |
Repositório Institucional da UFRN |
bitstream.url.fl_str_mv |
https://repositorio.ufrn.br/bitstream/123456789/34290/1/Reprodutibilidade_Lima_2018.pdf.txt https://repositorio.ufrn.br/bitstream/123456789/34290/2/license.txt https://repositorio.ufrn.br/bitstream/123456789/34290/3/IncompatibilidadeAleatorizacaoExperimentacao_Lima_2018.pdf https://repositorio.ufrn.br/bitstream/123456789/34290/4/license_rdf |
bitstream.checksum.fl_str_mv |
a375600597f6c7969a71988a5755e6de 7278bab9c5c886812fa7d225dc807888 111b51059b80b46646801783cb0c2fd8 e39d27027a6cc9cb039ad269a5db8e34 |
bitstream.checksumAlgorithm.fl_str_mv |
MD5 MD5 MD5 MD5 |
repository.name.fl_str_mv |
Repositório Institucional da UFRN - Universidade Federal do Rio Grande do Norte (UFRN) |
repository.mail.fl_str_mv |
|
_version_ |
1814833037424197632 |