Index Informativeness
Praktische Tiefe, Belege, umsetzbare Inhalte. Der Index rechnet den Elo-Wert jedes zugehörigen Merkmals über alle im Benchmark bewerteten Modelle in einen z-Wert um, bildet den Mittelwert, wobei invertierte Merkmale negativ eingehen, und wandelt das Ergebnis in einen Perzentilrang von 1 bis 100 um.
Muse Spark 1.3 (Max) belegt bei informativeness den höchsten Rang, GPT-3.5 Turbo den niedrigsten unter den 42 bewerteten Modellen.
Über die 5 Merkmale dieses Index reichen die Elo-Werte im Mittel von −14 bis 1773, mit einem typischen 95%-Konfidenzintervall pro Modell von ±32 Elo, also etwa ±4 Punkten auf der Skala von 1 bis 100.
Bestenliste für Informativeness
Der Mittelwert der Merkmals-Elo-z-Werte jedes Modells als Perzentilrang von 1 bis 100 über alle im Benchmark bewerteten Modelle. Fehlerbalken zeigen das 95%-Konfidenzintervall jedes Modells.
AA-PersonalityBench: Index Informativeness
Praktische Tiefe, Belege, umsetzbare Inhalte · Mittelwert der Elo-z-Werte jedes Modells über information dense, evidence-based, resource-specific, actionable guidance und pragmatic · Perzentilrang von 1 bis 100 über alle im Benchmark bewerteten Modelle
Zugehörige Merkmale
Informativeness wird aus den z-standardisierten Elo-Werten von 5 Merkmalen gebildet. Öffne ein Merkmal für seine vollständige Bestenliste.
Bestenlisten der Merkmale
Der Elo-Wert jedes zugehörigen Merkmals als Perzentilrang von 1 bis 100 über alle im Benchmark bewerteten Modelle.
AA-PersonalityBench: Information Dense
Wie viel lernt der Leser aus jedem Satz: Konkretes oder oberflächliche Allgemeinplätze? · Der Elo-Wert des Merkmals als Perzentilrang von 1 bis 100 über alle im Benchmark bewerteten Modelle