La sorprendente habilidad de ChatGPT para equiparse al pensamiento y razonamiento humano tuvo otra prueba de fuego. Esta vez Christian Terwiesch, profesor de gestión de operaciones en Wharton, en la Universidad de Pensilvania, le dio un pase a la IA para hacer un examen de MBA.
Las primeras conclusiones:
«ChatGPT hace un «trabajo increíble en cuestiones básicas de gestión de operaciones y análisis de procesos. No solo las respuestas son correctas, sino que las explicaciones son excelentes», escribe en un nuevo libro blanco.
Sin embargo, Terwiesch también sostuvo que la IA cometió «errores sorprendentes en cálculos relativamente simples a nivel de matemáticas de 6º grado», y que actualmente no puede manejar preguntas de análisis de procesos más avanzadas».
«Teniendo en cuenta este rendimiento, Chat GPT3 habría recibido una calificación de B a B en el examen», escribe Terwiesch.
Varias de las preguntas de Terwiesch tenían como objetivo probar si ChatGPT podría identificar un cuello de botella en una operación de procesamiento con múltiples máquinas que tienen diferentes capacidades de rendimiento.
Terwiesch también descubrió que ChatGPT podía formular preguntas inteligentes y humorísticas que podría usar en futuros exámenes. Sin embargo, el chatbot también introdujo fallas sutiles en algunas preguntas que las hicieron imposibles de responder.
«Todavía estamos lejos de un A + para problemas complejos y todavía necesitamos un humano en el circuito», escribe.