Qual é a IA mais confiável do momento?

Você já teve uma resposta errada de uma inteligência artificial? Às vezes, elas nos surpreendem com informações corretas, mas outras vezes, simplesmente 'inventam' dados que nunca existiram. Para esclarecer qual IA é realmente a melhor em termos de precisão, o jornalista Geoffrey A. Fowler, do Washington Post, decidiu fazer um experimento com nove ferramentas.

O Experimento e os Desafios

Contando com a ajuda de três bibliotecários experientes, Fowler formulou 30 perguntas desafiadoras para cada IA, incluindo big shots como Bing Copilot, ChatGPT (versões 4 e 5), Claude, Grok, Meta AI, Perplexity e os novos recursos do Google: AI Overview e AI Mode.

Resultados: Surpresas e Decepções

No total, foram analisadas 900 respostas, categorizadas em trivia, consultas a fontes especializadas, eventos recentes, identificação de vieses e questões sobre imagens. E adivinha? Algumas IAs ainda preferem 'inventar' do que admitir que não sabem!

O Melhor e o Pior Desempenho

O Google AI Mode brilhou, conseguindo acessar fontes confiáveis e respondendo corretamente perguntas desafiadoras, como quantos botões há em um iPhone e a primeira expedição ao Matterhorn. Em contrapartida, o Grok teve um desempenho lamentável, errando em várias respostas.

Pontos Fortes e Fracos das IAs

Bing Copilot se destacou em perguntas que demandavam referências especializadas, enquanto o ChatGPT 4 superou a versão 5 em evitar respostas enviesadas. A Perplexity mostrou uma boa performance na análise de imagens, mas cometeu erros ao citar links irrelevantes.

A Grande Conclusão: Qual é a Melhor IA?

Após avaliar tantas opções, a resposta clara é que a melhor IA ainda é a do Google, especificamente o Google AI Mode. Ele atua como um chatbot, refinando perguntas e buscando informações em múltiplas fontes antes de responder. O ChatGPT ficou em segundo lugar, mostrando melhorias em relação às versões anteriores, embora ainda apresente inconsistências.

Lições Aprendidas do Teste

Essa experiência deixou um recado: se nenhuma IA é perfeita, muitas vezes uma pesquisa simples no Google tradicional ainda é a maneira mais rápida e precisa de encontrar informações. Os bibliotecários reforçam a importância de usar as respostas das IAs com senso crítico, sempre conferindo fontes e confiabilidade, em vez de confiar cegamente no que elas dizem.