Inteligencia Irregular

Definición

Inteligencia irregular describe el perfil de capacidad inconsistente de los sistemas de IA actuales - donde los modelos pueden desempeñarse a nivel PhD en algunas tareas mientras fallan en desafíos de nivel de secundaria en otros dominios.

Por Qué Importa

El término, popularizado por Demis Hassabis, captura una barrera central para la AGI: falta de consistencia. Un sistema AGI debería ser fiable a través de todos los dominios, pero los modelos actuales muestran brechas dramáticas de capacidad.

Ejemplos

• GPT-4 puede ganar oro en la Olimpiada Internacional de Matemáticas pero falla en acertijos lógicos simples
• Los modelos pueden analizar filosofía compleja pero luchan con juego de ajedrez consistente
• Claude puede escribir código sofisticado pero podría perder errores obvios

Intuición Clave

“You would expect from an AGI system that it would be consistent across the board.” “Esperarías de un sistema AGI que fuera consistente en todos los ámbitos.” — Demis Hassabis

El perfil irregular sugiere que las arquitecturas actuales tienen limitaciones fundamentales - no son uniformemente inteligentes, sino que tienen picos y valles de capacidad.

Implicaciones

Para investigadores: Los benchmarks que prueban un dominio no predicen el rendimiento en otros Para usuarios: No asumas que la capacidad en un área se transfiere a otra Para AGI: Resolver la inteligencia irregular puede requerir cambios arquitectónicos, no solo escalar

Términos Relacionados

• Modelos del Mundo - Una solución propuesta para capacidad más uniforme
• Generalización - El problema subyacente