Tendencias de IA de Artificial Analysis

Análisis del estado actual de la IA y de las principales tendencias que impulsan el progreso. Incluye análisis de inteligencia de modelos, eficiencia, arquitectura, velocidad y costo de inferencia, y tendencias de entrenamiento.

Progreso de la IA

Seguimiento del avance continuo de la IA y de la posición de las principales empresas de IA.

Evolución de la inteligencia de los modelos de lenguaje de frontera

Artificial Analysis Intelligence Index v4.3.2 incorporates 10 evaluations: AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1

Gasto de capital de grandes empresas tecnológicas, a lo largo del tiempo

Gasto de capital por trimestre (en miles de millones de USD)

Intelligence Index vs. fecha de lanzamiento

Artificial Analysis Intelligence Index · Release date
Most attractive region

Modelos líderes por laboratorio de IA

Mayor Artificial Analysis Intelligence Index alcanzado por cada laboratorio de IA
No publicly available API

Eficiencia

Análisis de cómo evoluciona la eficiencia de la IA, incluyendo cómo cambian el costo de alcanzar ciertos niveles de inteligencia y la velocidad con la que esa inteligencia está disponible.

Costo de modelos de lenguaje por tarea del Intelligence Index, por umbral del Intelligence Index, a lo largo del tiempo

Costo en USD por tarea del Intelligence Index, promediado entre evaluaciones según su peso en el índice. Los umbrales usan el Artificial Analysis Intelligence Index v4.3.2.

Velocidad de salida de modelos de lenguaje, por umbral del Intelligence Index, a lo largo del tiempo

Tokens de salida por segundo. Los umbrales usan el Artificial Analysis Intelligence Index v4.3.2.

Análisis por país

La IA es un fenómeno global. Compartimos perspectivas sobre dónde ocurre el progreso de la IA y cómo se comparan los modelos líderes de distintos países. Profundizamos en EE. UU. y China como los dos principales centros de desarrollo de IA.

Inteligencia de modelos de lenguaje frontera por país, a lo largo del tiempo

Artificial Analysis Intelligence Index v4.3.2 incorporates 10 evaluations: AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1

Pesos abiertos: inteligencia de modelos de lenguaje frontera por país, a lo largo del tiempo

Artificial Analysis Intelligence Index v4.3.2 incorporates 10 evaluations: AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1

Modelos líderes por país

Artificial Analysis Intelligence Index · Leading models
No publicly available API

Modelos open source

Los modelos con pesos abiertos ofrecen flexibilidad de despliegue y la posibilidad de ajustarlos para casos de uso específicos. Analizamos los principales modelos con pesos abiertos y cómo se compara su inteligencia con la de modelos propietarios.

Progreso de la inteligencia de modelos de pesos abiertos vs. propietarios

Artificial Analysis Intelligence Index v4.3.2 incorporates 10 evaluations: AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1

Artificial Analysis Intelligence Index: pesos abiertos vs. propietarios

Artificial Analysis Intelligence Index v4.3.2 incorporates 10 evaluations: AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1
No publicly available API

Arquitectura de modelos

La arquitectura de los modelos de IA influye en su rendimiento y eficiencia. Esta sección examina tendencias arquitectónicas, como la creciente popularidad de la arquitectura Mixture of Experts (MoE), y cómo se relacionan con las capacidades de los modelos.

Intelligence Index vs. fecha de lanzamiento por arquitectura de modelo

Artificial Analysis Intelligence Index, solo modelos de pesos abiertos
Most attractive region

Tamaño del modelo: parámetros totales y activos

Comparison between total model parameters and parameters active during inference (billions)

Intelligence Index vs. parámetros activos

Artificial Analysis Intelligence Index · Active parameters at inference time (billions)
Most attractive quadrant
Pareto line

Intelligence Index vs. parámetros totales

Artificial Analysis Intelligence Index · Size in parameters (billions)
Most attractive quadrant
Pareto line

Longitud de contexto (tokens), mediana por trimestre

Mediana de longitud de contexto (miles de tokens)

Análisis de entrenamiento

Nuestro análisis de tendencias en el entrenamiento de modelos de IA considera tanto la evolución del tamaño de los entrenamientos como la relación entre el tamaño del entrenamiento y la inteligencia del modelo.

Tokens de entrenamiento por modelo

Tokens de entrenamiento en billones
No data available

Intelligence Index vs. tokens de entrenamiento

Artificial Analysis Intelligence Index v4.3.2 incorporates 10 evaluations: AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1 · Tokens de entrenamiento en billones
Most attractive quadrant
No data available