GPT-4: el buque insignia que subió el listón (2023)

GPT-4 de OpenAI podía leer imágenes además de texto y obtuvo buenas notas en exámenes hechos para humanos, afianzando una feroz carrera comercial y un secretismo que inquietó a los investigadores.

Cuatro meses después de que ChatGPT convirtiera los modelos de lenguaje en un fenómeno de masas, OpenAI lanzó GPT-4 el 14 de marzo de 2023. Se presentó como un buque insignia más seguro y potente, y pronto fue el modelo al que se recurría cuando se quería la mejor respuesta disponible.

Qué era nuevo

GPT-4 avanzó en dos frentes a la vez:

  • Multimodalidad. Donde los grandes modelos de lenguaje anteriores solo manejaban texto, GPT-4 también podía tomar imágenes como entrada: describir una foto, leer un gráfico o explicar un meme. Señalaba que la receta del Transformer no se limitaba a las palabras.
  • Rendimiento tipo examen. OpenAI informó de que GPT-4 obtenía percentiles altos en pruebas diseñadas para humanos, desde exámenes de abogacía hasta asignaturas avanzadas. Estos referentes son imperfectos, pero las cifras de titular reajustaron las expectativas sobre lo que puede hacer un modelo general.

Por dentro seguía siendo un Transformer escalado en la tradición de GPT-3, refinado con retroalimentación humana para comportarse como un asistente útil.

El giro al secretismo

GPT-4 también marcó un cambio en cómo el campo comparte su trabajo. Alegando competencia y seguridad, OpenAI se abstuvo de publicar el tamaño, la arquitectura o los datos de entrenamiento del modelo. El informe que lo acompañaba se leía más como una ficha de producto que como un artículo científico.

Para una disciplina construida sobre la publicación abierta, desde el referente ImageNet hasta el artículo del Transformer, fue un cambio notable. Alimentó un debate más amplio sobre si los modelos más capaces seguirían siendo inspeccionables o se volverían productos cerrados.

Por qué importa

GPT-4 confirmó que el asistente presentado con ChatGPT no era algo puntual. Fijó un listón de capacidad que la competencia pasó el año siguiente persiguiendo, y sus demos multimodales anticiparon un futuro en el que un solo modelo maneja texto, imágenes y más.

Los lanzamientos que siguieron, desde Gemini de Google hasta retadores de pesos abiertos como Llama 2, se entienden mejor como respuestas al estándar que fijó GPT-4.

#modelo-lenguaje #transformador