Esgotamento da IA e Escalabilidade

O sinal amarelo de que a lei da escalabilidade está próxima do teto foi dado recentemente por um dos principais nomes da história da IA, Ilya Sutskever, que deixou a OpenAI em maio. “O pré-treinamento (de modelos de IA) como conhecemos vai acabar sem dúvidas”, disse ele no começo de dezembro NeurIPS, um dos principais eventos da área no mundo. Antes disso, ele já havia declarado à Reuters: “A década de 2010 foi a era da escalabilidade, e estamos de volta à era do encantamento e da descoberta. Todos estão procurando a próxima grande novidade.”

O texto traz vários indícios de que a produção de conteúdo da internet está crescendo em uma velocidade muito menor que a demanda necessária para atender aos modelos de inteligência artificial. Acrescento que uma parte expressiva do que é produzida nos dias atuais é proveniente de IA e não conteúdo humano.