Artificial Analysis Decision Index
Perplexity
Decider v1.2: 출시, Decision Index 점수, 성능 및 가격
모델 요약
다른 의사결정 모델과 비교하면 Decider v1.2의 Decision Index 점수는 평균보다 높고, 가격은 경쟁력 있는 수준입니다. 또한 속도는 평균보다 느립니다. 이 모델의 지원 입력은 텍스트 및 이미지이며 컨텍스트 창은 262k토큰입니다.
Decider v1.2의 Artificial Analysis Decision Index 점수는 56점으로, 의사결정 모델 중 평균 이상입니다(중앙값: 53).
Decider v1.2의 작업당 시간은 206 ms으로 평균보다 느립니다(중앙값: 188 ms).
Decider v1.2의 입력 토큰 100만 개당 가격은 US$0.02입니다. Decision Index에서 Decider v1.2을 실행하는 평균 비용은 작업 100만 건당 $15입니다(경쟁력 있는 가격, 중앙값: $32).
| 개발사 | Perplexity |
|---|---|
| 제공업체 | Perplexity |
| 입력 모달리티 | 지원: 텍스트 및 이미지 |
| 컨텍스트 창 | 262k |
| 입력 가격 | 100만 토큰당 US$0.02 |
점수
Artificial Analysis Decision Index
Weighted average of AA-Omniscience-Decision, HLE-MultiChoice, When2Call and WildGuardTest · Higher is better
Artificial Analysis Decision Index vs. 작업 100만 건당 비용
Artificial Analysis Decision Index score vs. average cost per 1 million tasks (USD) · Lower is better
Most attractive quadrant
Pareto line
보정
Artificial Analysis Decision Index: 보정
모델이 선택한 답변에 부여한 확률 대비 정확도 · 0.1 단위 구간(답변 20개 이상) · 각 벤치마크에 동일한 가중치 적용
언어 모델 보정은 곧 제공될 예정입니다.
시간
Artificial Analysis Decision Index: 작업당 시간
Median time per task over every task across all Artificial Analysis Decision Index evaluations · Lower is better
비용
Artificial Analysis Decision Index: 작업 100만 건당 비용
Average cost per 1 million tasks across all Artificial Analysis Decision Index evaluations at current prices (USD) · Lower is better