Un profesor de la University College Cork de Irlanda ha puesto a prueba a los modelos de IA GPT-4o mini de OpenAI y el recién llegado DeepSeek-R1. Tras someterlos a un duro examen, asegura que los resultados le han sorprendido.

Barry Hayes ha solicitado a ChatGPT y DeepSeek que intenten resolver un examen de ingeniería eléctrica que preparó para sus alumnos. El profesor ha comparado las respuestas de 61 de sus estudiantes con las de la IA siguiendo el mismo sistema de calificación.

GPT-4o mini, la versión gratuita de ChatGPT, ha aprobado el examen con buena nota. La inteligencia artificial de OpenAI ha obtenido una puntuación del 90%. DeepSeek se ha convertido en un duro competidor con una puntuación del 94%.

Hayes ha aclarado que no ha proporcionado material de su asignatura ni información adicional que pueda condicionar las respuestas de GPT-4o mini ni DeepSeek-R1. Ambos chatbots han resuelto todo el examen en cuestión de segundos, mientras que sus alumnos han necesitado más de dos horas.

ChatGPT y DeepSeek han superado a los estudiantes

La IA está lejos de superar las capacidades humanas en aspectos como creatividad y toma de decisiones, pero destaca en análisis de información y pensamiento lógico. Los 61 estudiantes de la University College Cork no han podido competir con ChatGPT y DeepSeek.

Los alumnos de Barry Hayes han tenido que obtener una de las calificaciones más altas para entrar en el grado y cursan asignaturas como matemáticas avanzadas. A pesar de ello, la nota media del examen que realizaron en mayo del año pasado es del 63,8%.

La inteligencia artificial supera a los alumnos en áreas como matemáticas, física y lógica. “No tenía idea de lo efectiva que es ya la IA en algunos de los problemas de ingeniería comunes que se enseñan a los estudiantes universitarios”, según las declaraciones de Hayes al medio irlandés RTÉ 1.

Los chatbots empiezan a cometer errores en niveles más avanzados

El profesor ha sometido a ChatGPT y DeepSeek a un nuevo examen, en este caso tendrían que resolver problemas de ingeniería más avanzados dirigidos a alumnos de máster. La calificación de la IA ha sido más baja con una mayor tasa de fallos, pero sigue superando a las notas obtenidas por los estudiantes.

Un estudio realizado por la Escuela Politécnica Federal de Lausana (Suiza) ha puesto a prueba las capacidades de ChatGPT. El chatbot de OpenAI ha superado todas las expectativas, podría obtener un título de ingeniería tras responder correctamente al 65,8% de las preguntas de exámenes de 50 asignaturas diferentes.

Conoce cómo trabajamos en ComputerHoy.

Etiquetas: Inteligencia artificial