Alle Veröffentlichungen

Beam 1.0 vs. Inkling: Vergleich der Veröffentlichungen

Vergleich der Veröffentlichungen Beam 1.0 und Inkling: 1 Modell bzw. 2 Modelle mit unterschiedlichen Eigenschaften bei Intelligenz, Leistung und Preis. Unten werden die wichtigsten Kennzahlen aller 3 Modelle verglichen.

  • Bei der Intelligenz liegt Beam 1.0 mit 18 vorn, gegenüber Inkling (Xhigh) mit 12 bei Inkling.
  • Bei der Zeit pro Aufgabe ist Beam 1.0 mit 2.2 Min. am schnellsten, gegenüber Inkling (Xhigh) mit 8.1 Min. bei Inkling.
  • Bei den Kosten pro Aufgabe ist Beam 1.0 mit $0.28 am günstigsten, gegenüber Inkling (High) mit $0.62 bei Inkling.
Modell-Playground

Verglichene Veröffentlichungen

Beam 1.0Inkling (xhigh)Inkling (high)
Intelligence Index
18
12
11
Finanzen und Rechnungswesen
30
23
22
Strategie und Betrieb
34
19
18
Recht
28
23
22
Gesundheit und Medizin
31
18
--
Kosten pro AufgabeUSD
$0.28
$1.35
$0.62
Zeit pro AufgabeMinuten
2.2
8.1
--
Zeit bis zum ersten Antworttokens
7.30
14.63
--
Kontextfenster
1M
1M
1M
Modellentwickler
Reflection
Thinking Machines
Thinking Machines
Lizenz
Offen
Offen
Offen
Eingabemodalität

Unterstützt: Text

Unterstützt: Text, Bilder und Sprache

Unterstützt: Text, Bilder und Sprache

Ausgabemodalität

Unterstützt: Text

Unterstützt: Text

Unterstützt: Text

Anbieter
DeepInfraTogether AIModalThinking Machines
Thinking Machines
Artificial Analysis Intelligence Index · Higher is better
Inference time (minutes) per Intelligence Index task · Lower is better
Weighted average cost (USD) per Intelligence Index task · Lower is better

Intelligenz

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v5.0.1 incorporates 9 evaluations: AA-Briefcase v1.1, AutomationBench-AA, Terminal-Bench 4.0, FrontierCode-AA 2.0, AA-Omniscience v1.1, GDP.pdf, HLE-Diamond, CritPt v2 (Hard Subset), and Terminal-Bench-Science 0.1

Intelligence Index vs. Kosten pro Aufgabe

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task
Most attractive quadrant
Inkling
Pareto line

Kosten pro Aufgabe (USD, logarithmische Skala)

Kosten

Kosten pro Aufgabe des Intelligence Index

Weighted average cost (USD) per Intelligence Index task · Segmented by token type · Lower is better

Leistung

Zeit pro Aufgabe des Intelligence Index

Output tokens divided by end-to-end output speed (minutes per Intelligence Index task) · Speed at the model's own endpoint or the median across providers · Lower is better

Fähigkeitswerte

Fähigkeitsindizes

Misst die Leistung von Modellen bei bestimmten Fähigkeiten und in bestimmten Branchen
Finance & Accounting Index

Incorporates 5 evaluations: AA-Briefcase v1.1, AA-Omniscience v1.1, HLE-Diamond, AutomationBench-AA, GDP.pdf · Higher is better

Strategy & Ops Index

Incorporates 4 evaluations: AutomationBench-AA, AA-Briefcase v1.1, AA-Omniscience v1.1, GDP.pdf · Higher is better

Legal Index

Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf, AutomationBench-AA · Higher is better

Healthcare & Medical Index

Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, MLCR-AA, AutomationBench-AA, HLE-Diamond · Higher is better

Engineering Index

Incorporates 7 evaluations: AA-Omniscience v1.1, CritPt v2 (Hard Subset), Terminal-Bench-Science 0.1, HLE-Diamond, Terminal-Bench 4.0, FrontierCode-AA 2.0, AA-Briefcase v1.1 · Higher is better

Economics Index

Incorporates 4 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf · Higher is better

AA-PersonalityBench

vs.

AA-PersonalityBench: Index Expressiveness, Beam 1.0 vs. Inkling (xhigh)

Wahrscheinlichkeit, dass die Antwort eines Modells als stärker vom jeweiligen Merkmal geprägt beurteilt wird, berechnet aus dem Elo-Abstand · 50 % bedeutet Gleichstand
ReflectionBeam 1.0Thinking MachinesInkling (xhigh)
Metaphorical
12%
88%
Natural Sounding
25%
75%
Eloquent
28%
72%
Lexically Varied
28%
72%
Literate
36%
64%