Estudo da BBC Revela que Assistentes de IA Lutam com a Precisão do Conteúdo de Notícias

A BBC publicou um novo estudo revelando que assistentes de IA disponíveis ao público têm dificuldade em fornecer respostas precisas para perguntas de especialistas sobre notícias publicadas em seu site.

De acordo com o estudo compartilhado pela BBC, os pesquisadores consideraram chatbots gerativos de IA populares como o ChatGPT, Perplexity, Copilot e Gemini. O estudo foi realizado durante um mês – fornecendo acesso ao site da BBC – e mostrou que 51% das respostas dadas pelas ferramentas de IA apresentaram problemas significativos.

Jornalistas e especialistas consideraram a precisão, imparcialidade e análise de como as tecnologias de IA representavam o conteúdo fornecido. Outras descobertas no estudo mostraram que 13% das citações fornecidas pelos modelos de IA foram alteradas da fonte original ou inventadas, e que 19% dos resultados considerando o conteúdo da BBC apresentaram erros factuais ou imprecisões – relacionadas a números, datas ou declarações.

“Estamos animados com o futuro da IA e o valor que ela pode trazer para o público”, disse Pete Archer, Diretor de Programa para IA Generativa na BBC, em um anúncio público. “Mas a IA também está trazendo desafios significativos para o público. As pessoas podem pensar que podem confiar no que estão lendo desses assistentes de IA, mas essa pesquisa mostra que eles podem produzir respostas a perguntas sobre eventos de notícias chave que são distorcidas, factualmente incorretas ou enganosas.”

Os especialistas notaram que as informações fornecidas pelo ChatGPT e Copilot não estavam atualizadas. Como exemplo, disseram que ambos os chatbots afirmaram que Rishi Sunak e Nicola Sturgeon ainda estavam atuando como Primeiro Ministro e Primeira Ministra, respectivamente, após ambos terem deixado os cargos.

A BBC também reclamou sobre outras tecnologias fornecendo informações imprecisas, como os alertas de notícias resumidas da Inteligência da Apple fornecendo declarações falsas. A gigante da tecnologia anunciou recentemente uma nova atualização para o recurso de resumo de notícias de IA após a revista apresentar uma reclamação.