Modelos de Thinking Machines: inteligência, desempenho e preço
Por tarefa do Intelligence Index
A Artificial Analysis avaliou 3 modelos de Thinking Machines. Abaixo, comparamos as principais métricas desses modelos.
- Em inteligência, o principal modelo de Thinking Machines é Inkling 2 Small, com 31.
- Em velocidade, Inkling Small, com 5,6 min tem o menor tempo por tarefa.
- Em latência, Inkling (Xhigh), com 20,75 s oferece o menor tempo até o primeiro token da resposta final.
- Em termos de preço, Inkling Small, com $0.20 oferece o menor custo por tarefa. Os preços variam em até 6,7 vezes entre os modelos.
Inteligência
Artificial Analysis Intelligence Index
Intelligence Index vs. custo por tarefa
Custo
Custo por tarefa do Intelligence Index
Velocidade e latência
Tempo por tarefa do Intelligence Index
Pontuações de capacidades
Índices de capacidades
Incorporates 5 evaluations: AA-Briefcase v1.1, AA-Omniscience v1.1, HLE-Diamond, AutomationBench-AA, GDP.pdf · Higher is better
Incorporates 4 evaluations: AutomationBench-AA, AA-Briefcase v1.1, AA-Omniscience v1.1, GDP.pdf · Higher is better
Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf, AutomationBench-AA · Higher is better
Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, MLCR-AA, AutomationBench-AA, HLE-Diamond · Higher is better
Incorporates 7 evaluations: AA-Omniscience v1.1, CritPt v2 (Hard Subset), Terminal-Bench-Science 0.1, HLE-Diamond, Terminal-Bench 4.0, FrontierCode 2.0, AA-Briefcase v1.1 · Higher is better
Incorporates 4 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf · Higher is better
Todos os lançamentos de Thinking Machines
Mais detalhes
Pesos | Benchmarks de provedores | |||||||||
|---|---|---|---|---|---|---|---|---|---|---|
| Inkling 2 Small | 31 | 594B 17B ativos durante a inferência | 1M | US$ 0,2 | 16,5 | 151 | Não disponível | |||
| Inkling Small | 13 | 266B 12B ativos durante a inferência | 1M | US$ 0,2 | 5,6 | 108 | ||||
| Inkling (Xhigh) | 12 | 975B 41B ativos durante a inferência | 1M | US$ 0,7 | 8,1 | 105 | +2 |