Crucialmente, as referências da Wikipédia são os links para fontes que apoiam as informações na enciclopédia online. Mas, às vezes, essas referências são falhas, apontando para sites corrompidos, informações incorretas ou fontes não confiáveis. Um estudo publicado na Nature Machine Intelligence em 19 de outubro mostra que a inteligência artificial (IA) pode ajudar a limpar listas de referências imprecisas ou incompletas nas entradas da Wikipédia e melhorar sua qualidade e confiabilidade.
Fabio Petroni e colegas da SamayaAI, com sede em Londres, desenvolveram um sistema alimentado por redes neurais chamado “SIDE” que pode analisar se as referências da Wikipedia apoiam afirmações relevantes e sugerem melhores alternativas para aquelas que não o fazem.
“Dado que o ChatGPT é famoso por erros e ilusões sobre citações, parece um pouco irônico usar IA para ajudar a processar citações”, disse Noah Giansiracusa, que estuda inteligência artificial na Universidade Bentley em Waltham, Massachusetts. “Mas é importante lembrar que os modelos de linguagem de IA podem fazer muito mais do que chatbots.”
O SIDE é treinado para identificar boas referências usando artigos em destaque existentes na Wikipédia, que são promovidos no site e recebem ampla atenção de editores e moderadores. Ele pode então identificar reivindicações na página que contenham referências de baixa qualidade por meio do sistema de validação. Ele também verifica a Internet em busca de fontes confiáveis e lista opções para substituir referências incorretas.
Para testar o sistema, Petroni e seus colegas usaram o SIDE para recomendar referências para artigos em destaque na Wikipédia que nunca tinham visto antes. Em quase 50% dos casos, a referência preferida da SIDE já está citada no artigo. Em outros casos, encontrou outras referências.
Quando os resultados do SIDE foram mostrados a um grupo de usuários de teste da Wikipédia, 21% preferiram referências encontradas pela IA, 10% preferiram referências existentes e 39% não tiveram preferência.
Aleksandra Urman, cientista de comunicação computacional da Universidade de Zurique, na Suíça, disse que a ferramenta pode economizar tempo para editores e moderadores que verificam a precisão das entradas da Wikipedia, mas apenas se for usada corretamente. “O sistema pode ser útil para sinalizar citações que possam ser inadequadas”, disse ela. "A questão é o que a comunidade da Wikipédia consideraria mais útil."
Ullman aponta que os usuários da Wikipedia que testaram o sistema SIDE tinham duas vezes mais probabilidade de não gostar de ambas as citações do que de gostar da citação recomendada pela IA. “Isso significa que, neste caso, eles ainda estarão online em busca de citações relevantes”, disse ela.