Decider v1.1 27B: Release, Decision Index Score, Leistung und Preis

Name: Artificial Analysis Decision Index
Creator: Artificial Analysis
License: https://artificialanalysis.ai/docs/legal/Terms-of-Use.pdf

Perplexity besuchen

Im Vergleich zu anderen Entscheidungsmodellen liegt Decider v1.1 27B im Decision Index unter dem Durchschnitt, ist aber preislich angemessen. Das Modell ist außerdem schneller als der Durchschnitt. Das Modell unterstützt Text und Bild als Eingabe und hat ein Kontextfenster von 262k Tokens.

Decider v1.1 27B erzielt im Artificial Analysis Decision Index einen Wert von 53 und liegt damit unter dem Durchschnitt der Entscheidungsmodelle (Median: 53).

Mit 170 ms pro Aufgabe ist Decider v1.1 27B schneller als der Durchschnitt (Median: 188 ms).

Der Preis für Decider v1.1 27B beträgt 0,02 $ pro 1 Mio. Eingabetokens. Im Durchschnitt kosten 1 Mio. Aufgaben mit Decider v1.1 27B im Decision Index $17 (moderat bepreist; Median: $32).

Entwickler	Perplexity
Anbieter	Perplexity
Eingabemodalität	Unterstützt: Text und Bilder
Kontextfenster	262k
Eingabepreis	0,02 $ pro 1 Mio. Token

Ergebnis

Artificial Analysis Decision Index

Weighted average of AA-Omniscience-Decision, HLE-MultiChoice, When2Call and WildGuardTest · Higher is better

Sprachmodelle einbeziehen

Artificial Analysis Decision Index vs. Kosten pro 1 Mio. Aufgaben

Artificial Analysis Decision Index score vs. average cost per 1 million tasks (USD) · Lower is better

Sprachmodelle einbeziehen

Most attractive quadrant

Pareto line

Average cost per task at current token prices, multiplied by 1 million; for the index, the cost of one pass through all its evaluations divided by their combined tasks, multiplied by 1 million. Decision models are billed for input tokens only, and language models for input and output tokens.

Kalibrierung

Artificial Analysis Decision Index: Kalibrierung

Genauigkeit gegenüber der Wahrscheinlichkeit, die das Modell der gewählten Antwort zuwies · Intervalle von 0,1 mit mindestens 20 Antworten · Alle Benchmarks gleich gewichtet

Kalibrierung für Sprachmodelle folgt in Kürze.

Zeit

Artificial Analysis Decision Index: Zeit pro Aufgabe

Median time per task over every task across all Artificial Analysis Decision Index evaluations · Lower is better

Sprachmodelle einbeziehen

Median latency per task, in milliseconds; for the index, the median across the tasks of all its evaluations.

Kosten

Artificial Analysis Decision Index: Kosten pro 1 Mio. Aufgaben

Average cost per 1 million tasks across all Artificial Analysis Decision Index evaluations at current prices (USD) · Lower is better

Sprachmodelle einbeziehen

Decider v1.1 27B: Release, Decision Index Score, Leistung und Preis

Modellübersicht

Decision Index

Zeit

Kosten

Zusammenfassung des Vergleichs

Technische Spezifikationen

Ergebnis

Artificial Analysis Decision Index

Artificial Analysis Decision Index vs. Kosten pro 1 Mio. Aufgaben

Decision Cost per 1M Tasks

Kalibrierung

Artificial Analysis Decision Index: Kalibrierung

Zeit

Artificial Analysis Decision Index: Zeit pro Aufgabe

Decision Time per Task

Kosten

Artificial Analysis Decision Index: Kosten pro 1 Mio. Aufgaben

Decision Cost per 1M Tasks