Executivos são descalibrados nas suas previsões

Usando mais de dez mil previsões realizadas por executivos, três pesquisadores concluíram que estas pessoas são descalibradas nas suas estimativas. Segundo Ben-David, Graham e Harvey as pesquisas já tinham mostrado que as pessoas possuem excesso de confiança, superestimando a precisão das previsões e subestimando a variância. Gestores tomam decisões diariamente e a pesquisa procura determinar se as previsões são boas ou não.

Usando dados trimestrais por mais de dez anos sobre o comportamento do mercado acionário, os pesquisadores imaginaram que os gestores deveriam ter, pelo menos, um bom senso na estimativa do grau de risco, definindo intervalos de confiança razoáveis. Os pesquisadores pediram aos executivos uma estimativa dentro de um limite de confiança de 80%. A figura mostra o resultado:

A linha tracejada mostra o valor esperado ou 80% de acerto. A linha em vermelho o valor observado, cerca de 36%, bem abaixo da meta. As previsões estavam descalibradas. Mas a pesquisa trouxe um achado interessante: nos momentos de incerteza, quando geralmente o mercado é mais volátil, as respostas deveriam ter um intervalo de confiança maior, em razão da variância maior. Isto ocorreu durante a crise de 2008, quando o mercado apresentou uma elevada volatilidade. Mas nestes momentos parece que o nível de acerto piorou.

Outra conclusão interessante do estudo é que aparentemente os executivos com limites de confiança menor são de empresas com políticas mais agressivas. Isto pode indicar que a política da empresa contamina o executivo ou o contrário, o executivo contamina a empresa.

Confidence Accounting

Contadores apresentariam incertezas como intervalos para os investidores e gestores, em vez de números como discretos: "o balanço da Empresa X vale $ Y, mais ou menos $ Z, e estamos 95% confiantes de que ele cai dentro desse intervalo". Auditores iriam verificar esses intervalos. Isso mudaria auditoria no sentido de "ciência de medição"(...) Contas aprovadas seriam apresentadas de forma probabilística, mostrando intervalos. Com o tempo, os investidores podem avaliar uma empresa de auditoria com base em quão perto valores históricos caíram dentro dos limites estabelecidos.

É interessante. Obviamente que isto poderia eliminar a necessidade de contas como Crédito de Liquidação Duvidosa.

Intervalo de Confiança

Muitas pesquisas acadêmicas têm usado testes estatísticos para verificar se a hipótese apresentada se confirma ou não. E juntamente com estes testes temos a figura do intervalo de confiança. Assim, após levantar os dados e colocar estes valores num software estatístico, faz-se a interpretação dos resultados usando o intervalo de confiança.

Parece fácil e infalível. Basta olhar o resultado do software. Entretanto, três pesquisadores da Universidade de Groningen, além de um do Missouri, fizeram um levantamento com 120 pesquisadores e 442 estudantes, todos do campo da psicologia. Eles apresentaram seis frases envolvendo a interpretação de um determinado intervalo de confiança e solicitaram que os respondentes informassem se a frase era verdadeira ou não. E mas seis frases todas afirmações tinham como gabarito “falso”.

Em média os respondentes apresentaram desempenho ruim, errando, em média, mais de três afirmações. Isto é um sinal de que os pesquisadores, e seus pupilos, não conhecem a interpretação correta do que seria o intervalo de confiança. Obviamente que isto é um sinal alarmante para as pesquisas que estão sendo publicados no mundo. Assim, quando você ler sobre o resultado de uma pesquisa realizada por uma instituição de ensino renomada, desconfie da qualidade da análise. O pesquisador pode ter confundido os resultados.

Leia mais: HOEKSTRA, Rink et AL. Robust misinterpretation of confidence intervals. Psychon Bull Rev, 2014