Viés em pesquisas acadêmicas

Um dos requisitos para galgar degraus na carreira acadêmica nos dias de hoje é a publicação de pesquisas em periódicos de renome. Esta pressão tem criado situações onde o cientista procura aumentar as suas chances de publicar seu artigo.

Sabemos que as pesquisas que trazem novidades apresentam mais chances de serem aceitas. Isto termina por incentivar os cientistas a buscarem os resultados que possam agradar mais aos pareceristas e editores dos periódicos.

Usando 641 artigos publicados em três periódicos de excelência na área de economia (American Economic Review, The Journal of Political Economy e Quarterly Journal of Economics) quatro pesquisadores investigaram os resultados dos testes estatísticos. Isto significou analisar mais de 50 mil testes estatísticos, já que cada artigo possui em média 78 testes e mais de três mil tabelas. Como os artigos foram publicados entre 2005 e 2011, a investigação corresponde ao estado da arte da pesquisa na área de economia.

O resultado não foi uma grande surpresa: uma vez que os periódicos gostam das pesquisas que rejeitam a hipótese nula, os resultados apresentam uma grande distorção. Os valores do “valor do p” que os pesquisadores encontraram parecem um desenho de um camelo, com muitos valores acima de 25%, um vale entre 10% e 25%. Isto parece indicar que os pesquisadores “inflam” os resultados, tornando-os mais próximo daquilo que se esperam os periódicos.

Leia Mais em BRODEUR, Abel et al. Star Wars: The Empirics STrike Back. Working Paper, Iza DP 7268, 2013.