Thinking Machines-Modelle: Intelligenz, Leistung und Preis

Artificial Analysis hat 3 Modelle von Thinking Machines gebenchmarkt. Unten werden die wichtigsten Kennzahlen dieser Modelle verglichen.

  • Bei der Intelligenz ist Inkling 2 Small mit 31 das führende Modell von Thinking Machines.
  • Bei der Geschwindigkeit hat Inkling Small mit 7,1 Min. die niedrigste Zeit pro Aufgabe.
  • Bei der Latenz bietet Inkling (Xhigh) mit 19,28 s die kürzeste Zeit bis zum ersten Antworttoken.
  • Beim Preis bietet Inkling Small mit $0.20 die niedrigsten Kosten pro Aufgabe. Die Preise unterscheiden sich zwischen den Modellen um einen Faktor von bis zu 6,7.

IntelligenzUpdated

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v5.0.1 incorporates 9 evaluations: AA-Briefcase v1.1, AutomationBench-AA, Terminal-Bench 4.0, FrontierCode 2.0, AA-Omniscience v1.1, GDP.pdf, HLE-Diamond, CritPt v2 (Hard Subset), and Terminal-Bench-Science 0.1

Intelligence Index vs. Kosten pro Aufgabe

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task
Most attractive quadrant
Pareto line

Kosten

Kosten pro Aufgabe des Intelligence Index

Weighted average cost (USD) per Intelligence Index task · Segmented by token type · Lower is better

Geschwindigkeit und Latenz

Zeit pro Aufgabe des Intelligence Index

Output tokens divided by end-to-end output speed (minutes per Intelligence Index task) · Speed at the model's own endpoint or the median across providers · Lower is better

Fähigkeitswerte

Fähigkeitsindizes

Misst die Leistung von Modellen bei bestimmten Fähigkeiten und in bestimmten Branchen
Finance & Accounting Index

Incorporates 5 evaluations: AA-Briefcase v1.1, AA-Omniscience v1.1, HLE-Diamond, AutomationBench-AA, GDP.pdf · Higher is better

Strategy & Ops Index

Incorporates 4 evaluations: AutomationBench-AA, AA-Briefcase v1.1, AA-Omniscience v1.1, GDP.pdf · Higher is better

Legal Index

Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf, AutomationBench-AA · Higher is better

Healthcare & Medical Index

Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, MLCR-AA, AutomationBench-AA, HLE-Diamond · Higher is better

Engineering Index

Incorporates 7 evaluations: AA-Omniscience v1.1, CritPt v2 (Hard Subset), Terminal-Bench-Science 0.1, HLE-Diamond, Terminal-Bench 4.0, FrontierCode 2.0, AA-Briefcase v1.1 · Higher is better

Economics Index

Incorporates 4 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf · Higher is better

Alle Veröffentlichungen von Thinking Machines

Weitere Details

Gewichte
Anbieter-Benchmarks
Inkling 2 Small
Logo von Thinking MachinesThinking Machines
31
594B
17B während der Inferenz aktiv
1M
0,2 $
15,5
161
Nicht verfügbar
Thinking Machines
Inkling Small
Logo von Thinking MachinesThinking Machines
13
266B
12B während der Inferenz aktiv
1M
0,2 $
7,1
86
DeepInfraThinking Machines
Inkling (Xhigh)
Logo von Thinking MachinesThinking Machines
12
975B
41B während der Inferenz aktiv
1M
0,7 $
8,1
105
DeepInfraTogether AIModal
+2