Podcast: ¿Puede ChatGPT entrar a medicina? - ChatGPT da la PAES
ChatGPT volvió a dar la PAES (Prueba de Acceso a la Educación Superior) y con sus nuevos modelos y funcionalidades, desempeño mejor que nunca.
En esta nueva instancia, hicimos que ChatGPT, en varias de sus versiones, diera la PAES, para poder medir su desempeño en varias diciplinas, como también evaluar que tanto mejor son realmente los modelos de razonamiento como ChatGPT o1 y DeepSeek R1.
Hoy hablamos de como hicimos para que ChatGPT pudiera dar estas pruebas, cuales fueron los aprendizajes principales sobre los modelos y como se podría aplicar esto al mundo de los negocios.
Acompaña a Jonathan y a Nolan en este interesante capitulo.
Escucha este episodio en:
LINKS:
Nota ChatGPT da la PAES: https://blog.evoacademy.cl/chatgpt-responde-la-paes-2025/
Structured Outputs: https://www.youtube.com/watch?v=-56EfNIGy0k
Como usar la API de OpenAI: https://blog.evoacademy.cl/como-usar-la-api-de-openai-chatgpt/
Paper Anthropic: https://arxiv.org/html/2411.00640v1
TEMAS:
00:00 - Intro
00:28 - Inicio
02:01 - ¿Cómo se realizó el test?
04:19 - Estructura de la prueba
07:55 - Cómo le proporcionamos la información a ChatGPT
13:25 - Uso de JSON en el experimento
19:21 - Versiones de ChatGPT utilizadas
24:10 - Cómo enviar imágenes a un LLM
27:45 - Cómo verificamos la precisión de las respuestas
31:51 - Método para calcular la puntuación
35:56 - Resultados de ChatGPT en la prueba
39:02 - Tiempo de respuesta de ChatGPT
42:25 - Costo del experimento
48:25 - Interpretación de los resultados
52:37 - Conclusión