Um grupo de pesquisadores na Alemanha emitiu recentemente um alerta sobre o potencial de viés no uso de chatbots de IA para resumir conteúdo científico. Após analisar 4.900 resumos científicos escritos por humanos, o grupo utilizou diversos modelos de IA para comparar como esses sistemas processavam as informações. Os resultados mostraram que a maioria dos chatbots cometeu o erro de generalização excessiva, mesmo quando solicitados a resumir com precisão.
ChatGPT e DeepSeek distorcem dados científicos.
Modelos de IA como ChatGPT e DeepSeek demonstraram ser capazes de distorcer conteúdo científico ao resumi-lo, especialmente na área médica.
A IA pode facilmente distorcer o conteúdo ao resumir pesquisas científicas.
Nos experimentos, os modelos de IA cometeram cinco vezes mais erros do que os pesquisadores humanos quando não receberam nenhuma orientação. Mesmo com requisitos claros de precisão, a taxa de erro ainda foi duas vezes maior do que com um resumo padrão. Um membro da equipe de pesquisa comentou: “A generalização pode parecer inofensiva às vezes, mas na verdade altera a natureza da pesquisa original. É um viés sistêmico.”
Notavelmente, as versões mais recentes de chatbots não apenas deixam de resolver o problema, como o agravam. Com sua apresentação fluida e envolvente, os resumos gerados por IA facilmente transmitem uma impressão de confiabilidade, enquanto o conteúdo real é distorcido. Em um caso específico, a DeepSeek alterou a frase "seguro e implementável com sucesso" para "tratamento seguro e eficaz" — uma interpretação que divergiu das conclusões originais do estudo.
Em outro exemplo, o modelo Llama aplicou recomendações para medicamentos para diabetes a indivíduos jovens sem especificar dosagem, frequência ou efeitos colaterais. Se o leitor, um médico ou profissional de saúde , não verificar as informações no estudo original, esse tipo de resumo pode representar um perigo direto para os pacientes.
Especialistas acreditam que esse fenômeno decorre da forma como os modelos de IA são treinados. Muitos chatbots atuais são treinados usando dados secundários – como notícias científicas produzidas em massa – que já foram simplificadas. À medida que a IA continua a resumir esse conteúdo simplificado, o risco de distorção aumenta.
Especialistas em IA na área da saúde mental argumentam que as barreiras técnicas ao desenvolvimento e uso da IA precisam ser estabelecidas em breve.
Os usuários devem ter cautela, pois os chatbots podem distorcer o conteúdo com facilidade.
À medida que os usuários dependem cada vez mais de chatbots de IA para aprender informações científicas, pequenas imprecisões na interpretação podem se acumular e se espalhar rapidamente, levando a concepções errôneas generalizadas. Em um momento em que a confiança na ciência está em declínio, esse risco é particularmente preocupante e exige atenção especial.
A integração da IA na pesquisa e na disseminação do conhecimento é uma tendência irreversível. No entanto, especialistas afirmam que a tecnologia não pode substituir o papel dos humanos na compreensão e verificação do conteúdo científico. Ao utilizar chatbots em áreas de alto risco, como a saúde, a precisão deve ser priorizada, em vez de focar apenas na fluidez da linguagem ou na velocidade de resposta.
Fonte: https://khoahocdoisong.vn/chatgpt-deepseek-bop-meo-du-lieu-khoa-hoc-post1552971.html


Chuva de primavera

A cidade de Dong Nai passa por transformações.



