Resumo
- A Meta manipulou testes do Llama 4, usando variantes diferentes do modelo para otimizar resultados, o que levou à perda de confiança de Mark Zuckerberg no departamento de IA.
- Como consequência, a Meta investiu US$ 15 bilhões na Scale AI e nomeou Alexandr Wang para liderar uma nova unidade de pesquisa em IA, além de contratar cientistas de elite com bônus de até US$ 100 milhões.
- Yann LeCun, ex-chefe de IA da Meta, criticou a estratégia da empresa e fundou sua própria startup, a AMI Labs, em Paris, para focar em treinamentos de IA com vídeos e dados espaciais.
Yann LeCun, ex-chefe do departamento de inteligência artificial da Meta, confirmou que a empresa “manipulou um pouco” os testes de benchmarking do Llama 4. Segundo o executivo, os engenheiros usaram diferentes variantes do modelo em cada uma das provas para otimizar os resultados.
A declaração de LeCun, dada em uma entrevista ao Financial Times, retoma uma polêmica da época do lançamento do Llama 4, em abril de 2025. Poucos dias após o anúncio, especialistas observaram que os testes foram feitos com um modelo diferente do liberado para o público. Na ocasião, a Meta afirmou que usou diversas versões experimentais e que todas tiveram bons resultados.
A situação ficou mais feia quando usuários e desenvolvedores começaram a usar o Llama 4 e ficaram desapontados com o desempenho do modelo em condições reais.
Quais foram as consequências da manipulação?
LeCun relata que Mark Zuckerberg, CEO da Meta, não gostou da atitude e “basicamente perdeu a confiança em todos os envolvidos”. A resposta, nas palavras do ex-líder de IA, foi imediata, com a decisão de “jogar para escanteio” toda a organização de IA generativa. O cientista contou que “muitos já saíram, e muitos que ainda não saíram vão sair”.
A companhia, então, mudou sua estratégia: investiu US$ 15 bilhões na Scale AI e colocou Alexandr Wang, CEO da startup, para chefiar uma unidade de pesquisa em modelos de IA. Além disso, a empresa fez diversas contratações, atraindo cientistas de elite de concorrentes com bônus de até US$ 100 milhões.
LeCun critica estratégia da Meta
LeCun passou a ser chefiado por Wang — e não gostou. Na entrevista para o FT, ele dispara: o novo líder “não tem experiência em pesquisa ou como fazer pesquisas”. O até então chefe de IA da Meta tem um currículo acadêmico de peso, incluindo um prêmio Turing por seu trabalho com redes neurais profundas.
Além disso, LeCun discordou dos rumos da empresa, que aposta alto em escalar modelos de linguagem de larga escala (LLMs). Ele considera que esse tipo de IA não é capaz de atingir a superinteligência tão desejada por Zuckerberg. “Minha integridade como cientista não me permite fazer isso”, ressalta.
O cientista defende que os LLMs não conseguem processar informações suficientes para desenvolver inteligência. Para LeCun, uma criança de quatro anos recebe 50 vezes mais dados do que o presente em todos os textos publicados na internet.
Ele explica que tentar fazer um modelo desse tipo desenvolver inteligência é como tentar aprender carpintaria lendo todos os livros já publicados sobre madeira, mas sem tocar em um martelo. Por isso, o pesquisador acredita que treinamentos com vídeos e dados espaciais são necessários para a IA conseguir um aprendizado baseado em física.
Fora da Meta, LeCun criou sua própria startup, a AMI Labs. Ela tem sede em Paris, e seu fundador diz que há um motivo para isso. “O Vale do Silício está completamente hipnotizado por modelos generativos, então você tem que fazer esse tipo de trabalho longe de lá”, explica.
Com informações do Implicator.ai
Ex-chefe da Meta diz que benchmarks do Llama 4 foram manipulados
