Artificial Analysis Decision Index
Cloudflare
Clef-Omni: Release, Decision Index Score, Leistung und Preis
Modellübersicht
Im Vergleich zu anderen Entscheidungsmodellen liegt Clef-Omni im Decision Index am unteren Ende und ist besonders teuer. Das Modell ist außerdem schneller als der Durchschnitt. Das Modell unterstützt Text und Bild als Eingabe und hat ein Kontextfenster von 64k Tokens.
Clef-Omni erzielt im Artificial Analysis Decision Index einen Wert von 44 und liegt damit am unteren Ende der Entscheidungsmodelle (Median: 53).
Mit 172 ms pro Aufgabe ist Clef-Omni schneller als der Durchschnitt (Median: 188 ms).
Der Preis für Clef-Omni beträgt 0,15 $ pro 1 Mio. Eingabetokens. Im Durchschnitt kosten 1 Mio. Aufgaben mit Clef-Omni im Decision Index $123 (teuer; Median: $32).
| Entwickler | Cloudflare |
|---|---|
| Anbieter | Cloudflare |
| Eingabemodalität | Unterstützt: Text und Bilder |
| Kontextfenster | 64k |
| Eingabepreis | 0,15 $ pro 1 Mio. Token |
Ergebnis
Artificial Analysis Decision Index
Weighted average of AA-Omniscience-Decision, HLE-MultiChoice, When2Call and WildGuardTest · Higher is better
Artificial Analysis Decision Index vs. Kosten pro 1 Mio. Aufgaben
Artificial Analysis Decision Index score vs. average cost per 1 million tasks (USD) · Lower is better
Most attractive quadrant
Pareto line
Kalibrierung
Artificial Analysis Decision Index: Kalibrierung
Genauigkeit gegenüber der Wahrscheinlichkeit, die das Modell der gewählten Antwort zuwies · Intervalle von 0,1 mit mindestens 20 Antworten · Alle Benchmarks gleich gewichtet
Kalibrierung für Sprachmodelle folgt in Kürze.
Zeit
Artificial Analysis Decision Index: Zeit pro Aufgabe
Median time per task over every task across all Artificial Analysis Decision Index evaluations · Lower is better
Kosten
Artificial Analysis Decision Index: Kosten pro 1 Mio. Aufgaben
Average cost per 1 million tasks across all Artificial Analysis Decision Index evaluations at current prices (USD) · Lower is better