Modelos de Thinking Machines: inteligência, desempenho e preço

A Artificial Analysis avaliou 3 modelos de Thinking Machines. Abaixo, comparamos as principais métricas desses modelos.

  • Em inteligência, o principal modelo de Thinking Machines é Inkling 2 Small, com 31.
  • Em velocidade, Inkling Small, com 5,6 min tem o menor tempo por tarefa.
  • Em latência, Inkling (Xhigh), com 20,75 s oferece o menor tempo até o primeiro token da resposta final.
  • Em termos de preço, Inkling Small, com $0.20 oferece o menor custo por tarefa. Os preços variam em até 6,7 vezes entre os modelos.

InteligênciaUpdated

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v5.0.1 incorporates 9 evaluations: AA-Briefcase v1.1, AutomationBench-AA, Terminal-Bench 4.0, FrontierCode 2.0, AA-Omniscience v1.1, GDP.pdf, HLE-Diamond, CritPt v2 (Hard Subset), and Terminal-Bench-Science 0.1

Intelligence Index vs. custo por tarefa

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task
Most attractive quadrant
Pareto line

Custo

Custo por tarefa do Intelligence Index

Weighted average cost (USD) per Intelligence Index task · Segmented by token type · Lower is better

Velocidade e latência

Tempo por tarefa do Intelligence Index

Output tokens divided by end-to-end output speed (minutes per Intelligence Index task) · Speed at the model's own endpoint or the median across providers · Lower is better

Pontuações de capacidades

Índices de capacidades

Mede o desempenho dos modelos em capacidades e setores específicos
Finance & Accounting Index

Incorporates 5 evaluations: AA-Briefcase v1.1, AA-Omniscience v1.1, HLE-Diamond, AutomationBench-AA, GDP.pdf · Higher is better

Strategy & Ops Index

Incorporates 4 evaluations: AutomationBench-AA, AA-Briefcase v1.1, AA-Omniscience v1.1, GDP.pdf · Higher is better

Legal Index

Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf, AutomationBench-AA · Higher is better

Healthcare & Medical Index

Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, MLCR-AA, AutomationBench-AA, HLE-Diamond · Higher is better

Engineering Index

Incorporates 7 evaluations: AA-Omniscience v1.1, CritPt v2 (Hard Subset), Terminal-Bench-Science 0.1, HLE-Diamond, Terminal-Bench 4.0, FrontierCode 2.0, AA-Briefcase v1.1 · Higher is better

Economics Index

Incorporates 4 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf · Higher is better

Todos os lançamentos de Thinking Machines

Mais detalhes

Pesos
Benchmarks de provedores
Inkling 2 Small
Logo: Thinking MachinesThinking Machines
31
594B
17B ativos durante a inferência
1M
US$ 0,2
16,5
151
Não disponível
Thinking Machines
Inkling Small
Logo: Thinking MachinesThinking Machines
13
266B
12B ativos durante a inferência
1M
US$ 0,2
5,6
108
DeepInfraThinking Machines
Inkling (Xhigh)
Logo: Thinking MachinesThinking Machines
12
975B
41B ativos durante a inferência
1M
US$ 0,7
8,1
105
DeepInfraTogether AIModal
+2