Este modelo está obsoleto. Continuamos medindo o desempenho apenas para a carga padrão de 10 mil tokens de entrada. Os resultados de outras cargas são históricos e não são mais atualizados.

Google lançou uma versão mais recente, Gemma 4 26B A4B. Sugerimos considerá-la como alternativa.

•

Open weights model

•

Released março de 2025

Análise de inteligência, desempenho e preço do Gemma 3 12B Instruct

Resumo do modelo

InteligênciaUpdated

4
Artificial Analysis Intelligence Index
1 de 4 unidades para Inteligência.

Velocidade

N/D
Tokens de saída por segundo
Valor desconhecido entre 4 unidades para Velocidade.

Custo

Entrada US$ 0,00Saída US$ 0,00
$0.00
Custo por tarefa do Intelligence Index
1 de 4 unidades para Custo.
26M
Tokens de saída do Intelligence Index
4 de 4 unidades para Verbosidade.

Updated
Artificial Analysis Intelligence Index · Higher is better
Not publicly available

Velocidade

Output tokens per second · Higher is better
Weighted average cost (USD) per Intelligence Index task · Lower is better
Not publicly available

InteligênciaUpdated

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v4.3.2 incorporates 10 evaluations: AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1
Not publicly available

Artificial Analysis Intelligence Index: pesos abertos vs. proprietários

Artificial Analysis Intelligence Index v4.3.2 incorporates 10 evaluations: AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1
Not publicly available

Mede o desempenho dos modelos em capacidades e setores específicos

Artificial Analysis Índice de Finanças e Contabilidade

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better
Not publicly available

Intelligence Evaluations

Intelligence evaluations measured independently by Artificial Analysis · Higher is better
Ver mais
Not publicly available

Agentic knowledge work, (Elo-500)/2000

Agentic real-world work tasks, (Elo-500)/2000

Agentic SaaS workflows

Agentic coding & terminal use

SciCodeUnder review

Coding

Reasoning & knowledge

Professional document reasoning, All-pass

CritPtUnder review

Physics reasoning

Long context reasoning

Legal agentic work, criterion pass rate

Agentic business operations

Agentic scientific research workflows in a terminal

Quantitative analysis on spreadsheets & documents

Kubernetes incident root-cause analysis

Visual reasoning

Medical long context reasoning

AA-Briefcase v1.1Updated

Elo do AA-Briefcase

AA-Briefcase v1.1 is an agentic knowledge work benchmark developed by Artificial Analysis. AA-Briefcase Elo is a combined metric that aggregates rubric pass rate, analytical quality Elo and presentation Elo · Higher is better
Not publicly available

AA-Omniscience

AA-Omniscience Index

AA-Omniscience Index (higher is better) measures knowledge reliability and hallucination. It rewards correct answers, penalizes hallucinations, and has no penalty for refusing to answer. Scores range from -100 to 100, where 0 means as many correct as incorrect answers, and negative scores mean more incorrect than correct.
Not publicly available

Openness Index

Artificial Analysis Openness Index: pontuação

O Openness Index avalia a abertura dos modelos em uma escala normalizada de 0 a 100 (quanto maior, mais aberto)

Comparações do Intelligence Index

Intelligence Index vs. custo por tarefa do Intelligence Index

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task
Most attractive quadrant
Pareto line

Uso de tokens

Tokens de saída por tarefa do Índice de Inteligência

Média ponderada de tokens de saída usados para executar uma tarefa do Índice de Inteligência da Artificial Analysis
Not publicly available

Custo

Custo por tarefa do Intelligence Index

Weighted average cost (USD) per Artificial Analysis Intelligence Index task, segmented by token type. Lower is better
Not publicly available

Custo de executar o Artificial Analysis Intelligence Index

Cost (USD) to run all evaluations in the Artificial Analysis Intelligence Index
Not publicly available

Preços: acertos de cache, entrada e saída

Price (USD per M Tokens)
Not publicly available

Janela de contexto

Janela de contexto

Context window: tokens limit · Higher is better
Not publicly available

Tamanho do modelo (somente modelos de pesos abertos)

Tamanho do modelo: parâmetros totais e ativos

Comparison between total model parameters and parameters active during inference (billions)

Perguntas frequentes

Perguntas comuns sobre o Gemma 3 12B Instruct