GPT-6 Luna (Decisions): Release, Decision Index Score, Leistung und Preis

Modellübersicht

48
Artificial Analysis Decision Index
1 von 4 Einheiten für Decision Index.

Zeit

168 ms
Mediane Zeit pro Aufgabe
2 von 4 Einheiten für Zeit.

Kosten

$79
Kosten pro 1 Mio. Aufgaben (USD)
4 von 4 Einheiten für Kosten.

Ergebnis

Artificial Analysis Decision Index

Weighted average of AA-Omniscience-Decision, HLE-MultiChoice, When2Call and WildGuardTest · Higher is better

Artificial Analysis Decision Index vs. Kosten pro 1 Mio. Aufgaben

Artificial Analysis Decision Index score vs. average cost per 1 million tasks (USD) · Lower is better
Most attractive quadrant
Pareto line

Kalibrierung

Artificial Analysis Decision Index: Kalibrierung

Genauigkeit gegenüber der Wahrscheinlichkeit, die das Modell der gewählten Antwort zuwies · Intervalle von 0,1 mit mindestens 20 Antworten · Alle Benchmarks gleich gewichtet

Kalibrierung für Sprachmodelle folgt in Kürze.

Zeit

Artificial Analysis Decision Index: Zeit pro Aufgabe

Median time per task over every task across all Artificial Analysis Decision Index evaluations · Lower is better

Kosten

Artificial Analysis Decision Index: Kosten pro 1 Mio. Aufgaben

Average cost per 1 million tasks across all Artificial Analysis Decision Index evaluations at current prices (USD) · Lower is better