Desempenho do ChatGPT em questões de Matemática do Enem: uma análise de erros e limitações
Authors:
- Juliano Nunes dos SantosJSJuliano Nunes dos Santos
- Alexandre Bezerra de LimaALAlexandre Bezerra de Lima
- Ryann Carlos de Arruda QuintinoRQRyann Carlos de Arruda Quintino
- Sarah Andrade Toscano de CarvalhoSCSarah Andrade Toscano de Carvalho
- Yuri de Almeida Malheiros BarbosaYBYuri de Almeida Malheiros Barbosa
- Rogéria Gaudencio Do RêgoRRRogéria Gaudencio Do Rêgo
- Thaís Gaudencio Do RêgoTRThaís Gaudencio Do Rêgo
Open Access
- 1 January 2026
- journal article
- Published by FapUNIFESP (SciELO) in Ciência & Educação (Bauru)
- Vol. 32
Abstract
Resumo Nos últimos anos, chatbots baseados em modelos de linguagem em larga escala têm se popularizado, embora ainda apresentem dificuldades na resolução de problemas matemáticos. Neste estudo, analisamos o desempenho do ChatGPT-3.5 em questões de Matemática do Enem entre 2017 e 2022, buscando identificar padrões de dificuldade e tipos de erro. Foram analisadas 266 questões, categorizadas de acordo com as competências do Enem e os tipos de representação visual, nas modalidades com e sem alternativas. A análise revelou uma taxa de acerto que variou entre 22,2% e 55,5%. As maiores dificuldades ocorreram em questões envolvendo conhecimentos geométricos e representações visuais de formas geométricas descritas. Os erros mais comuns identificados foram de interpretação, de lógica e de cálculo de valores incorretos, evidenciando limitações do modelo em tarefas que exigem um raciocínio matemático estruturado.Keywords
This publication has 10 references indexed in Scilit:
- Large Language Model-Powered Automated Assessment: A Systematic ReviewApplied Sciences, 2025
- Performance of the ChatGPT tool in solving residency examsSeminars in Medical Writing and Education, 2024
- Alfabetização científica: o papel dos conhecimentos específicos nas Ciências da NaturezaCiência & Educação (Bauru), 2024
- Desempenho do ChatGPT nas questões da avaliação anual de residentes do Colégio Brasileiro de RadiologiaRadiologia Brasileira, 2024
- A inteligência artificial na educação: os desafios do ChatGPTTexto Livre, 2023
- Um panorama de situações do tipo misto em provas do Exame Nacional do Ensino MédioCiência & Educação (Bauru), 2023
- Dificuldades de Alunos na Resolução de Problemas: análise a partir de propostas de ensino em dissertaçõesBolema: Boletim de Educação Matemática, 2022
- Inteligência Artificial: riscos, benefícios e uso responsávelEstudos Avançados, 2021
- DIFICULDADES ENVOLVENDO A VISUALIZAÇÃO EM GEOMETRIA ESPACIALVidya, 2020
- Correlação entre o Raciocínio Lógico e o Raciocínio Matemático em Crianças EscolarizadasBolema: Boletim de Educação Matemática, 2019