Confiar ou Não Confiar: Verificação de Fatos Aumentada por Recuperação em Discurso

A desinformação online aparece cada vez mais em formatos falados, como clipes de notícias, podcasts, entrevistas, discursos políticos e vídeos em redes sociais, gerando a necessidade de sistemas de verificação de fatos que possam validar afirmações diretamente a partir da fala. Introduzimos o VeriSpeak, um benchmark de sondagem para estudar a verificação de fatos baseada em fala em Large Audio Language Models (LALMs). O VeriSpeak contém 3.879 afirmações faladas abrangendo fatos temporais, geográficos e relacionais, com rótulos equilibrados de verdadeiro e falso. O benchmark foi projetado para examinar se a capacidade de verificação factual transfere do texto para a fala, e se LALMs aumentados por recuperação podem usar evidências textuais para apoiar ou refutar corretamente afirmações faladas. Nossos experimentos revelam uma lacuna consistente entre as modalidades texto‑fala: LALMs que verificam afirmações escritas de forma confiável frequentemente falham nas mesmas afirmações quando faladas. Além disso, a recuperação isolada fornece ganho limitado …