Revisões profissionais ou palpites da massa

A popularização do sistema de avaliação criou uma questão importante: qual opinião é mais relevante, dos críticos ou das classificações baseadas nas multidões? Veja o caso do cinema; o IMDb utiliza a opinião das pessoas que queiram palpitar sobre seu filme, enquanto o Rotten trabalha com os críticos. Ou o caso da avaliação de um restaurante. Ou a avaliação de um livro.

Existindo sabedoria das multidões, o razoável seria indicar que o sistema de classificações das multidões. Eis uma pesquisa importante sobre o assunto: 

Em um artigo na American Economic Review, Waldfogel e co-autor Imke Reimers investigaram os impactos relativos das análises dos críticos profissionais e das classificações baseadas em multidões no bem-estar do consumidor de mercado de livros.

Waldfogel e Reimers se concentraram em livros vendidos pela Amazon, responsável por quase metade do mercado de livros físicos dos EUA. Eles usaram medidas diárias de classificações de vendas e classificações por estrelas baseadas em multidões para 21.546 edições vendidas durante 2018 e fizeram referência cruzada desses dados com análises profissionais, incluindo The New York Times.

Revisões profissionais e classificações da Amazon tiveram impactos significativos nas vendas. Nos primeiros cinco dias após a publicação, as vendas do livro melhoraram 55% e, ao longo de um ano, as vendas aumentaram 2,8%. As críticas aumentaram a receita de vendas de livros em quase US $ 20 milhões. Os ratings de estrelas da Amazon renderam um aumento de US $ 27,51 milhões.

As figuras abaixo mostram os impactos do New York Times (painel esquerdo) e outras revisões profissionais importantes (painel direito) por 20 dias antes e 40 dias após a revisão. O painel esquerdo mostra que o Times ofereceu uma melhoria imediata no ranking de vendas. (...) Outras análises profissionais também têm um impacto considerável, embora não tanto quanto a revisão do Times. 

(...) Apesar argumentos em contrário, o crescente domínio do mercado da Amazon não enfraqueceu a influência de revisores profissionais. Os autores descobriram que a crítica do NY Times não teve menos impacto em 2018 do que em 2004.