Modelos de Thinking Machines: inteligência, desempenho e preço

A Artificial Analysis avaliou 2 modelos de Thinking Machines. Abaixo, comparamos as principais métricas desses modelos.

  • Em inteligência, o principal modelo de Thinking Machines é Inkling Small, com 26.
  • Em velocidade de saída, o modelo mais rápido é Inkling Small, com 202 tokens/s.
  • Em latência, Inkling Small, com 11,56 s oferece o menor tempo até o primeiro token de resposta.
  • Em termos de preço, Inkling Small, com $0.09 oferece o menor custo por tarefa.

Inteligência

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v4.3.2 incorporates 10 evaluations: AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1

Intelligence Index vs. custo por tarefa

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task
Most attractive quadrant

Custo

Custo por tarefa do Intelligence Index

Weighted average cost (USD) per Intelligence Index task · Segmented by token type · Lower is better

Velocidade e latência

Velocidade de saída

Output tokens per second · Higher is better

Pontuações de capacidades

Índices de capacidades

Mede o desempenho dos modelos em capacidades e setores específicos
Finance & Accounting Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Strategy & Ops Index

Incorporates 6 evaluations: GDPval-AA v2.1, AA-Briefcase v1.1, AA-Omniscience, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Legal Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AA-LCR v1.1, GDP.pdf, AutomationBench-AA · Higher is better

Healthcare & Medical Index

Incorporates 6 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, MLCR-AA, Humanity's Last Exam, AutomationBench-AA · Higher is better

Engineering Index

Incorporates 6 evaluations: AA-Omniscience, Humanity's Last Exam, CritPt, GDPval-AA v2.1, AA-Briefcase v1.1, Terminal-Bench 4.0 · Higher is better

Economics Index

Incorporates 5 evaluations: AA-Omniscience, Humanity's Last Exam, GDPval-AA v2.1, AA-Briefcase v1.1, AA-LCR v1.1 · Higher is better

Todos os lançamentos de Thinking Machines

Mais detalhes

Pesos
Benchmarks de provedores
Inkling Small
Logo: Thinking MachinesThinking Machines
26
266B
12B ativos durante a inferência
1M
US$ 0,2
202
DeepInfraThinking Machines
Inkling (Xhigh)
Logo: Thinking MachinesThinking Machines
25
975B
41B ativos durante a inferência
1M
US$ 0,7
197
DeepInfraTogether AIModal
+3