Viés da publicação

Um dos grandes problemas da pesquisa científica é o chamado viés da publicação. Geralmente as pesquisas com resultados estatisticamente significativos possuem maiores chances de serem publicados. Uma pesquisa, da edição de agosto do American Economic Review (via aqui) mostrou que estas chances são de 30 vezes para os resultados da economia experimental. Como consequência, os resultados publicados podem estar inflados.

A figura abaixo mostra uma correção para experimentos que foram publicados no The American Economic Review e no Quarterly Journal of Economics, entre 2011 e 2014. A estimativa original está em roxo e a estimativa revisada em cor preta. O gráfico apresenta os intervalos de confiança de 95%. Os valores ajustados são, em geral, menores que os valores originais. Observe que o último estudo, de Kuziemko et al, tornou-se insignificante depois da correção.

No entanto, muitos resultados passam de significativos para insignificantes. Apenas dois dos dezoito resultados originais foram estatisticamente insignificantes. Após considerar o viés de publicação, doze resultados são estatisticamente insignificantes no nível de 5%.