Claude Haiku 5.5 vs. Gemini 3.8 Flash: comparação de lançamentos

Name: Inteligência
Creator: Artificial Analysis
License: https://artificialanalysis.ai/docs/legal/Terms-of-Use.pdf

Comparação dos lançamentos Claude Haiku 5.5 e Gemini 3.8 Flash: 5 e 3 modelos, respectivamente, cada um com diferentes características de inteligência, desempenho e preço. Abaixo, comparamos as principais métricas dos 8 modelos.

Em inteligência, Claude Haiku 5.5 tem a pontuação mais alta: Claude Haiku 5.5 (Max), com 36, diante de Gemini 3.8 Flash (High), com 31 de Gemini 3.8 Flash.
Em velocidade de saída, Claude Haiku 5.5 é o mais rápido: Claude Haiku 5.5 (Max), com 241 tokens/s, diante de Gemini 3.8 Flash (High), com 133 tokens/s de Gemini 3.8 Flash.
Em custo por tarefa, Claude Haiku 5.5 é o mais barato: Claude Haiku 5.5 (Low), com $0.04, diante de Gemini 3.8 Flash (Medium), com $6.26 de Gemini 3.8 Flash.

Playground de modelos

Lançamentos comparados


	Claude Haiku 5.5 (max)	Claude Haiku 5.5 (xhigh)	Gemini 3.8 Flash (high)	Gemini 3.8 Flash (medium)	Claude Haiku 5.5 (high)	Claude Haiku 5.5 (medium)	Gemini 3.8 Flash (low)	Claude Haiku 5.5 (low)
Intelligence Index	36	34	31	30	30	25	22	19
Finanças e Contabilidade	44	41	42	42	38	35	34	29
Estratégia e Operações	39	39	47	47	37	33	35	27
Jurídico	39	37	42	42	35	33	33	27
Saúde e Medicina	37	34	38	38	32	31	31	25
Engenharia	42	40	38	37	36	32	31	27
Economia	44	43	41	40	39	36	34	30
AA-Briefcase v1.1	1575	1524	1202	1182	1440	1369	1062	1114
AutomationBench-AA	35.4%	36.0%	59.9%	60.9%	33.7%	28.6%	36.5%	22.9%
Terminal-Bench 4.0	32.8%	29.3%	19.7%	19.7%	21.7%	15.2%	10.1%	12.6%
FrontierCode 2.0	34.9%	29.9%	18.7%	16.5%	23.2%	16.1%	8.1%	8.0%
AA-Omniscience v1.1	12	8	23	24	5	4	13	2
GDP.pdf	20.8%	18.2%	21.0%	22.8%	17.2%	15.2%	18.6%	11.2%
HLE-Diamond	29.6%	28.8%	33.1%	29.1%	23.7%	16.8%	24.3%	14.1%
CritPt v2 (Hard Subset)	41.0%	44.5%	43.5%	44.0%	42.5%	30.0%	31.5%	21.5%
Terminal-Bench-Science 0.1	20.0%	18.1%	10.0%	10.5%	10.0%	7.1%	8.1%	1.9%

Custo por tarefaUSD	$0.41	$0.25	$7.77	$6.26	$0.16	$0.09	--	$0.04
Preço de entradaUSD/1M tokens	$0.10	$0.10	$0.75	$0.75	$0.10	$0.10	$0.75	$0.10
Preço de saídaUSD/1M tokens	$0.50	$0.50	$3.75	$3.75	$0.50	$0.50	$3.75	$0.50
Preço de acerto do cacheUSD/1M tokens	$0.01	$0.01	$0.075	$0.075	$0.01	$0.01	$0.075	$0.01
Preço de escrita no cacheUSD/1M tokens	$0.125	$0.125	$0.75	$0.75	$0.125	$0.125	$0.75	$0.125

Velocidade de saídaTokens/s	241	196	133	--	187	175	--	185
Tempo até o primeiro tokens	310,72	67,20	27,26	--	24,31	10,36	--	7,51
Tempo até o primeiro token de respostas	310,72	67,20	27,26	--	24,31	10,36	--	7,51
Tempo de resposta de ponta a pontas	312,80	69,75	31,03	--	26,99	13,21	--	10,22
Tempo por tarefas	593,47	441,28	724,41	--	298,26	192,95	--	97,99

Janela de contexto	1M	1M	1M	1M	1M	1M	1M	1M
Criador	Anthropic	Anthropic	Google	Google	Anthropic	Anthropic	Google	Anthropic
Licença	Proprietário	Proprietário	Proprietário	Proprietário	Proprietário	Proprietário	Proprietário	Proprietário
Modalidade de entrada	Compatível com: texto e imagem	Compatível com: texto e imagem	Compatível com: texto, imagem, fala e vídeo	Compatível com: texto, imagem, fala e vídeo	Compatível com: texto e imagem	Compatível com: texto e imagem	Compatível com: texto, imagem, fala e vídeo	Compatível com: texto e imagem
Modalidade de saída	Compatível com: texto	Compatível com: texto	Compatível com: texto	Compatível com: texto	Compatível com: texto	Compatível com: texto	Compatível com: texto	Compatível com: texto
Provedores

Updated

Inteligência

Artificial Analysis Intelligence Index · Higher is better

Velocidade

Output tokens per second · Higher is better

Custo por tarefa

Weighted average cost (USD) per Intelligence Index task · Lower is better

InteligênciaUpdated

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v5.0 incorporates 9 evaluations: AA-Briefcase v1.1, AutomationBench-AA, Terminal-Bench 4.0, FrontierCode 2.0, AA-Omniscience v1.1, GDP.pdf, HLE-Diamond, CritPt v2 (Hard Subset), and Terminal-Bench-Science 0.1

Artificial Analysis Intelligence Index v5.0 includes: AA-Briefcase v1.1, AutomationBench-AA, Terminal-Bench 4.0, FrontierCode 2.0, AA-Omniscience v1.1, GDP.pdf, HLE-Diamond, CritPt v2 (Hard Subset), Terminal-Bench-Science 0.1. See Intelligence Index methodology for further details, including a breakdown of each evaluation and how we run them.

Intelligence Index vs. custo por tarefa

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task

Most attractive quadrant

Claude Haiku 5.5

Gemini 3.8 Flash

Pareto line

AA-Briefcase v1.1

AutomationBench-AA

Custo por tarefa (USD, escala logarítmica)

Weighted average cost per Intelligence Index task. Each evaluation’s cost is calculated from input, cache hit, cache write, reasoning, and answer token prices, divided by task count, and weighted by its Intelligence Index weight.

Custo

Custo por tarefa do Intelligence Index

Weighted average cost (USD) per Intelligence Index task · Segmented by token type · Lower is better

Velocidade e latência

Velocidade de saída

Output tokens per second · Higher is better

Tokens per second received while the model is generating tokens (ie. after first chunk has been received from the API for models which support streaming).

Figures represent performance of the model's first-party API or the median across providers where a first-party API is not available.

Pontuações de capacidades

Índices de capacidades

Mede o desempenho dos modelos em capacidades e setores específicos

Finance & Accounting Index

Incorporates 5 evaluations: AA-Briefcase v1.1, AA-Omniscience v1.1, HLE-Diamond, AutomationBench-AA, GDP.pdf · Higher is better

Strategy & Ops Index

Incorporates 4 evaluations: AutomationBench-AA, AA-Briefcase v1.1, AA-Omniscience v1.1, GDP.pdf · Higher is better

Legal Index

Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf, AutomationBench-AA · Higher is better

Healthcare & Medical Index

Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, MLCR-AA, AutomationBench-AA, HLE-Diamond · Higher is better

Engineering Index

Incorporates 7 evaluations: AA-Omniscience v1.1, CritPt v2 (Hard Subset), Terminal-Bench-Science 0.1, HLE-Diamond, Terminal-Bench 4.0, FrontierCode 2.0, AA-Briefcase v1.1 · Higher is better

Economics Index

Incorporates 4 evaluations: AA-Briefcase v1.1, AA-Omniscience v1.1, HLE-Diamond, GDP.pdf · Higher is better

Avaliações

AA-PersonalityBenchNew

Modelo Avs.Modelo B

AA-PersonalityBench: índice Expressiveness, Claude Haiku 5.5 (max) vs. Gemini 3.8 Flash (high)

Probabilidade de a resposta de cada modelo ser julgada como a que demonstra mais cada traço, a partir da diferença de Elo entre os dois · 50% é um confronto equilibrado

Claude Haiku 5.5 (max)

Gemini 3.8 Flash (high)

Metaphorical

94%

Natural Sounding

93%

Eloquent

20%

80%

Literate

74%

26%

Lexically Varied

74%

26%

Claude Haiku 5.5 vs. Gemini 3.8 Flash: comparação de lançamentos

Inteligência

Velocidade

Custo por tarefa

InteligênciaUpdated

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index

Intelligence Index vs. custo por tarefa

Cost per Intelligence Index Task

Artificial Analysis Intelligence Index

Custo

Custo por tarefa do Intelligence Index

Cost per Intelligence Index Task

Velocidade e latência

Velocidade de saída

Output Speed

Model Performance Representation

Pontuações de capacidades

Índices de capacidades

Avaliações

AA-PersonalityBenchNew

AA-PersonalityBench: índice Expressiveness, Claude Haiku 5.5 (max) vs. Gemini 3.8 Flash (high)