Descobrimos algo preocupante sobre modelos de IA: se o problema for muito difícil, eles desistem imediatamente 1b2c1y
Pesquisadores da Apple descobriram que os modelos de raciocínio se cansam de pensar e desistem de problemas complexos Alguns especialistas apontam que testes realizados pela Apple apresentaram certos problemas 4n4m1k
Dizer que as máquinas não pensam é uma ilusão. Não somos nós que dizemos isso, é um grupo de pesquisadores da Apple que acaba de publicar um estudo revelador intitulado exatamente assim ("A ilusão do pensamento"). Nele, os especialistas analisaram o desempenho de vários modelos de IA com a capacidade de "raciocinar", e suas conclusões são impressionantes... e preocupantes. c1d3c
Quebra-cabeças para IAs que "raciocinam" b4z26
O normal ao avaliar a capacidade de um modelo de IA é usar benchmarks com testes de programação ou matemática, por exemplo. Em vez disso, a Apple criou vários testes baseados em quebra-cabeças lógicos que eram totalmente novos e, portanto, não podiam fazer parte do treinamento desses modelos. Claude Thinking, DeepSeek-R1 e o3-mini participaram da avaliação.
Modelos com falhas 4a3z3l
Em seus testes, eles descobriram que todos esses modelos de raciocínio acabavam se chocando contra uma parede ao se depararem com problemas complexos. Nesses casos, a precisão desses modelos caía vertiginosamente para 0%. Não importava que você desse a esses modelos mais recursos ao tentar resolver esses problemas. Se eles apresentassem alguma dificuldade, não conseguiam lidar com a situação.
IAs se cansam de pensar 3r706
Na verdade, algo curioso aconteceu. À medida que os problemas se tornavam mais complexos, esses modelos começavam a pensar não mais, mas menos. Eles usavam menos fichas para resolvê-los e desistiam mais cedo, apesar de poderem usar recursos ilimitados.
Nem mesmo com ajuda 6h5sq
Os ...
Matérias relacionadas
Há um alimento que as baratas não am e você com certeza tem na sua cozinha