Thinking Machines-Modelle: Intelligenz, Leistung und Preis

Artificial Analysis Intelligence Index

* Geschätzt

Pro Intelligence-Index-Aufgabe

Artificial Analysis hat 2 Modelle von Thinking Machines gebenchmarkt. Unten werden die wichtigsten Kennzahlen dieser Modelle verglichen.

  • Bei der Intelligenz ist Inkling Small mit 28 (geschätzt) das führende Modell von Thinking Machines.
  • Bei der Ausgabegeschwindigkeit ist Inkling Small mit 210 Tokens/s das schnellste Modell.
  • Bei der Latenz bietet Inkling Small mit 11,59 s die kürzeste Zeit bis zum ersten Antwort-Token.

Intelligenz

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v4.3.2 incorporates 10 evaluations: AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1
Estimate (independent evaluation forthcoming)

Intelligence Index vs. Cost per Intelligence Index Task

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task
Most attractive quadrant
No data available

Kosten

Cost per Intelligence Index Task

Weighted average cost (USD) per Artificial Analysis Intelligence Index task, segmented by token type. Lower is better
No data available

Geschwindigkeit und Latenz

Output Speed

Output tokens per second · Higher is better

Fähigkeitswerte

Fähigkeitsindizes

Misst die Leistung von Modellen bei bestimmten Fähigkeiten und in bestimmten Branchen
Finance & Accounting Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Strategy & Ops Index

Incorporates 6 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Legal Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AA-LCR v1.1, GDP.pdf, AutomationBench-AA · Higher is better

Healthcare & Medical Index

Incorporates 6 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, MLCR-AA, Humanity's Last Exam, AutomationBench-AA · Higher is better

Engineering Index

Incorporates 6 evaluations: AA-Omniscience, Humanity's Last Exam, CritPt, GDPval-AA v2.1, AA-Briefcase v1.1, Terminal-Bench 4.0 · Higher is better

Economics Index

Incorporates 5 evaluations: AA-Omniscience, Humanity's Last Exam, GDPval-AA v2.1, AA-Briefcase v1.1, AA-LCR v1.1 · Higher is better

Alle Veröffentlichungen von Thinking Machines

Weitere Details

Gewichte
Anbieter-Benchmarks
Inkling Small
Logo von Thinking MachinesThinking Machines
28
266B
12B während der Inferenz aktiv
1M
0,2 $
210
Thinking MachinesDeepInfraBaseten
Inkling (xhigh)
Logo von Thinking MachinesThinking Machines
25
975B
41B während der Inferenz aktiv
1M
0,7 $
194
DeepInfraBasetenTogether AI
+3