Thinking Machines 모델: 지능, 성능 및 가격
Artificial Analysis는 Thinking Machines의 모델 3개를 벤치마크했습니다. 아래에서 이 모델들의 주요 지표를 비교합니다.
- 지능 부문에서 Thinking Machines의 최고 모델은 Inkling 2 Small(31)입니다.
- 속도 부문에서 작업당 시간이 가장 짧은 모델은 Inkling Small(5.6분)입니다.
- 지연 시간 부문에서 첫 답변 토큰까지 걸리는 시간이 가장 짧은 모델은 Inkling (Xhigh)(20.75초)입니다.
- 가격 부문에서 작업당 비용이 가장 낮은 모델은 Inkling Small($0.20)입니다. 모델 간 가격 차이는 최대 6.7배입니다.
지능
Artificial Analysis Intelligence Index
Intelligence Index와 작업당 비용
비용
Intelligence Index 작업당 비용
속도 및 지연 시간
Intelligence Index 작업당 시간
역량 점수
역량 지수
Incorporates 5 evaluations: AA-Briefcase v1.1, AA-Omniscience v1.1, HLE-Diamond, AutomationBench-AA, GDP.pdf · Higher is better
Incorporates 4 evaluations: AutomationBench-AA, AA-Briefcase v1.1, AA-Omniscience v1.1, GDP.pdf · Higher is better
Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf, AutomationBench-AA · Higher is better
Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, MLCR-AA, AutomationBench-AA, HLE-Diamond · Higher is better
Incorporates 7 evaluations: AA-Omniscience v1.1, CritPt v2 (Hard Subset), Terminal-Bench-Science 0.1, HLE-Diamond, Terminal-Bench 4.0, FrontierCode 2.0, AA-Briefcase v1.1 · Higher is better
Incorporates 4 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf · Higher is better
Thinking Machines의 모든 릴리스
상세 정보
웨이트 | 제공업체 벤치마크 | |||||||||
|---|---|---|---|---|---|---|---|---|---|---|
| Inkling 2 Small | 31 | 594B 추론 시 17B 활성 | 1M | US$0.2 | 16.5 | 151 | 제공되지 않음 | |||
| Inkling Small | 13 | 266B 추론 시 12B 활성 | 1M | US$0.2 | 5.6 | 108 | ||||
| Inkling (Xhigh) | 12 | 975B 추론 시 41B 활성 | 1M | US$0.7 | 8.1 | 105 | +2 |