Sam Altman, CEO de OpenAI, ha reavivado el debate sobre la dirección de la investigación en inteligencia artificial, argumentando que una generación de científicos limitó el progreso al subestimar la importancia del "escalado" en los modelos de lenguaje grandes (LLMs).
Altman defiende firmemente la estrategia de OpenAI de escalar los LLMs, a pesar de las críticas de figuras como Yann LeCun, quien considera que son un "callejón sin salida". Según Altman, los datos demuestran la capacidad de los LLMs para generar conocimiento nuevo, citando ejemplos como la resolución de conjeturas matemáticas complejas.
Si bien reconoce que los LLMs aún enfrentan limitaciones en tareas de juicio a largo plazo, Altman insiste en que el enfoque en el escalado es fundamental para alcanzar la inteligencia artificial avanzada. Sus comentarios reflejan la continua tensión entre diferentes filosofías de desarrollo de IA.