1 Modell

Reflection-Modelle: Intelligenz, Leistung und Preis

Name: Artificial Analysis Intelligence Index
Creator: Artificial Analysis
License: https://artificialanalysis.ai/docs/legal/Terms-of-Use.pdf

Reflection

Intelligenz

Updated

Beam 1.0

Artificial Analysis Intelligence Index

Zeit pro Aufgabe

Beam 1.0

2.3 Min.

Pro Aufgabe des Intelligence Index

Kosten

Beam 1.0

$0.28

Pro Aufgabe des Intelligence Index

Artificial Analysis hat 1 Modell von Reflection gebenchmarkt. Unten sind seine wichtigsten Kennzahlen aufgeführt.

Bei der Intelligenz ist Beam 1.0 mit 18 das führende Modell von Reflection.
Bei der Geschwindigkeit hat Beam 1.0 mit 2,3 Min. die niedrigste Zeit pro Aufgabe.
Bei der Latenz bietet Beam 1.0 mit 7,17 s die kürzeste Zeit bis zum ersten Antworttoken.
Beim Preis bietet Beam 1.0 mit $0.28 die niedrigsten Kosten pro Aufgabe.

IntelligenzUpdated

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v5.0.1 incorporates 9 evaluations: AA-Briefcase v1.1, AutomationBench-AA, Terminal-Bench 4.0, FrontierCode 2.0, AA-Omniscience v1.1, GDP.pdf, HLE-Diamond, CritPt v2 (Hard Subset), and Terminal-Bench-Science 0.1

Artificial Analysis Intelligence Index v5.0.1 includes: AA-Briefcase v1.1, AutomationBench-AA, Terminal-Bench 4.0, FrontierCode 2.0, AA-Omniscience v1.1, GDP.pdf, HLE-Diamond, CritPt v2 (Hard Subset), Terminal-Bench-Science 0.1. See Intelligence Index methodology for further details, including a breakdown of each evaluation and how we run them.

Intelligence Index vs. Kosten pro Aufgabe

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task

Most attractive quadrant

Weighted average cost per Intelligence Index task. Each evaluation’s cost is calculated from input, cache hit, cache write, reasoning, and answer token prices, divided by task count, and weighted by its Intelligence Index weight.

Kosten

Kosten pro Aufgabe des Intelligence Index

Weighted average cost (USD) per Intelligence Index task · Segmented by token type · Lower is better

Geschwindigkeit und Latenz

Zeit pro Aufgabe des Intelligence Index

Output tokens divided by end-to-end output speed (minutes per Intelligence Index task) · Speed at the model's own endpoint or the median across providers · Lower is better

The weighted average time (minutes) per Artificial Analysis Intelligence Index task: output tokens per task divided by output speed, weighted by each benchmark's weight in the Intelligence Index.

Speed and latency metrics average each endpoint's runs over the past 5 days, and the error rate pools them. We run the benchmark every 6 hours, and endpoints of deprecated models every 18 hours.

Fähigkeitswerte

Fähigkeitsindizes

Misst die Leistung von Modellen bei bestimmten Fähigkeiten und in bestimmten Branchen

Finance & Accounting Index

Incorporates 5 evaluations: AA-Briefcase v1.1, AA-Omniscience v1.1, HLE-Diamond, AutomationBench-AA, GDP.pdf · Higher is better

Strategy & Ops Index

Incorporates 4 evaluations: AutomationBench-AA, AA-Briefcase v1.1, AA-Omniscience v1.1, GDP.pdf · Higher is better

Legal Index

Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf, AutomationBench-AA · Higher is better

Healthcare & Medical Index

Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, MLCR-AA, AutomationBench-AA, HLE-Diamond · Higher is better

Engineering Index

Incorporates 7 evaluations: AA-Omniscience v1.1, CritPt v2 (Hard Subset), Terminal-Bench-Science 0.1, HLE-Diamond, Terminal-Bench 4.0, FrontierCode 2.0, AA-Briefcase v1.1 · Higher is better

Economics Index

Incorporates 4 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf · Higher is better

Alle Veröffentlichungen von Reflection

Beam 1.0
1 Modell
18
Höchste Intelligenz

Weitere Details

								Gewichte		Anbieter-Benchmarks
Beam 1.0	Reflection	18	501B 23B während der Inferenz aktiv	1M	0,2 $	2,3	249	🤗	+2	Anzeigen

Reflection-Modelle: Intelligenz, Leistung und Preis

Intelligenz

Zeit pro Aufgabe

Kosten

IntelligenzUpdated

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index

Intelligence Index vs. Kosten pro Aufgabe

Cost per Intelligence Index Task

Artificial Analysis Intelligence Index

Kosten

Kosten pro Aufgabe des Intelligence Index

Cost per Intelligence Index Task

Geschwindigkeit und Latenz

Zeit pro Aufgabe des Intelligence Index

Time per Intelligence Index Task

Time Period

Fähigkeitswerte

Fähigkeitsindizes

Alle Veröffentlichungen von Reflection

Weitere Details