IAs não conseguem distinguir outras IAs no Teste de Turing adaptado

Uma pesquisa recente mostrou que inteligências artificiais têm dificuldade extremo em identificar outras máquinas durante uma conversa. Em um experimento adaptado do Teste de Turing, apenas três sistemas entre 98 testes conseguiram reconhecer corretamente os participantes de IA. A investigação, publicada na revista Computers in Human Behavior Reports, utilizou sete modelos de linguagem, incluindo GPT-4.5, Claude 3.7 Sonnet, Gemini 2.5 Pro e Grok 3, para avaliar como os chatbots identificam se estão conversando com humanos ou outras máquinas.

Os participantes do estudo foram 20 pessoas humanas e os mesmos sete modelos de IA. Os chatbots responderam em duas condições: com instruções simples para agir como humanos ou com uma personalidade detalhada, incluindo interesses pessoais, respostas naturais e erros de digitação. Ao todo, foram realizados 238 testes com 1.714 perguntas. Os resultados indicaram que, mesmo com uma personalidade detalhada, nenhuma IA foi identificada corretamente.

Além disso, os sistemas atribuíram uma probabilidade média de 88% de serem humanos para as máquinas, contra 78% para os humanos reais. A análise revelou que as respostas com personalidade tiveram cerca de 39 palavras, próximo ao tamanho médio das mensagens humanas (38 palavras). O estudo destaca que os resultados são específicos aos modelos e instruções testadas, sem implicar que todas as IAs falhem em identificar outras máquinas.