AA-PersonalityBench

Index Transparency

Wahrheitsgemäß, räumt Unsicherheit ein, nicht schmeichlerisch. Der Index rechnet den Elo-Wert jedes zugehörigen Merkmals über alle im Benchmark bewerteten Modelle in einen z-Wert um, bildet den Mittelwert, wobei invertierte Merkmale negativ eingehen, und wandelt das Ergebnis in einen Perzentilrang von 1 bis 100 um.

Zugehörige Merkmale:TruthfulAdmits UncertaintyDisclaims AssumptionsFlags NuancesSycophantic
Claude Sonnet 5.5 (Max, Default Fallback) belegt bei transparency den höchsten Rang, GPT-3.5 Turbo den niedrigsten unter den 42 bewerteten Modellen.
Über die 5 Merkmale dieses Index reichen die Elo-Werte im Mittel von 236 bis 1175, mit einem typischen 95%-Konfidenzintervall pro Modell von ±30 Elo, also etwa ±5 Punkten auf der Skala von 1 bis 100.

Bestenliste für Transparency

Der Mittelwert der Merkmals-Elo-z-Werte jedes Modells als Perzentilrang von 1 bis 100 über alle im Benchmark bewerteten Modelle. Fehlerbalken zeigen das 95%-Konfidenzintervall jedes Modells.

AA-PersonalityBench: Index Transparency

Wahrheitsgemäß, räumt Unsicherheit ein, nicht schmeichlerisch · Mittelwert der Elo-z-Werte jedes Modells über truthful, admits uncertainty, disclaims assumptions, flags nuances und weniger sycophantic · Perzentilrang von 1 bis 100 über alle im Benchmark bewerteten Modelle

Zugehörige Merkmale

Transparency wird aus den z-standardisierten Elo-Werten von 5 Merkmalen gebildet. Sycophantic geht invertiert ein, sodass weniger davon den Index erhöht. Öffne ein Merkmal für seine vollständige Bestenliste.

Truthful

Admits Uncertainty

Disclaims Assumptions

Flags Nuances

Sycophantic

Invertiert

Bestenlisten der Merkmale

Der Elo-Wert jedes zugehörigen Merkmals als Perzentilrang von 1 bis 100 über alle im Benchmark bewerteten Modelle.

AA-PersonalityBench: Truthful

Ist die Antwort sachlich korrekt, ohne erfundene Details oder Quellenangaben? · Der Elo-Wert des Merkmals als Perzentilrang von 1 bis 100 über alle im Benchmark bewerteten Modelle

Weitere Indizes

ExpressivenessOrganizationInformativenessWarmthConvictionImaginationSlop