ChatGPT es bueno en humanidades pero falla en ciencias exactas; comprender la prueba realizada con el examen Enem

Según una prueba realizada por DeltaFolha, el ChatGPT, De OpenAI, le fue bien en la prueba de Enem, solo fallando en los exámenes exactos. AI obtuvo una puntuación media de 612,3 en las pruebas objetivas del Enem, superando al 98,9% de los estudiantes en ciencias humanas y al 95,3% en lenguajes y códigos.

El análisis consideró el puntaje de cada curso y mostró que la inteligencia artificial tendría un buen desempeño en el Enem, sin embargo su desempeño en matemáticas fue considerado bajo, obteniendo un promedio de 443,1 puntos, por debajo del promedio de 527,1 de los candidatos humanos. Por otro lado, las ciencias humanas, curiosamente, fueron llevadas por la tecnología. En la simulación, la media de IA fue de 725,3, superior a los 523,3 puntos de los competidores reales.

PUBLICIDAD

Para el 70% de las personas en los Estados Unidos, ChatGPT es confiable, según muestra la investigación
Para el 70% de las personas en los Estados Unidos, ChatGPT es confiable, según muestra la investigación

Metodología utilizada en las pruebas Enem de los últimos cinco años.

La evaluación de ChatGPT se basó en respuestas de IA de pruebas realizadas durante los últimos cinco años, respondiendo 1.290 preguntas. La metodología utilizada en la prueba fue la Teoría de Respuesta al Ítem. Este modelo matemático adoptado por Enem predice ítems calibrados según parámetros de discriminación, dificultad y probabilidad de acierto aleatorio, según narra DeltaFolha. 

A Folha calculó la nota final del ChatGPT, utilizando el análisis estándar del Inep, en el que la máquina respondió cada pregunta una sola vez, sin ejemplos previos, indicando la alternativa que consideraba correcta.

Aunque destacó en ciencias humanas y en lenguajes y códigos, el ChatGPT presentó bajo rendimiento en matemáticas, lo que podría ser un obstáculo para el ingreso a carreras populares en las principales universidades federales del país. Aun así, AI obtuvo una puntuación media de 608,7 en el Enem, mejor que la obtenida por el 79% de los estudiantes ese año, sumada a la nota de ensayo.

PUBLICIDAD

Lea también:

desplazarse hacia arriba