Transparency 지수
진실하고 불확실성을 인정하며 아첨하지 않음. 이 지수는 각 구성 특성의 Elo를 벤치마크에서 평가된 모든 모델 기준 z-점수로 변환하고, 반전된 특성은 음수로 반영해 평균을 구한 뒤, 결과를 1~100의 백분위 순위로 나타냅니다.
평가된 모델 42개 중 transparency에서 Claude Sonnet 5.5 (Max, Default Fallback)이(가) 가장 높고 GPT-3.5 Turbo이(가) 가장 낮습니다.
이 지수의 특성 5개에 걸쳐 Elo 점수는 평균 236에서 1175이며, 모델별 95% 신뢰 구간은 보통 Elo ±30로, 1~100 척도에서 약 ±5점에 해당합니다.
Transparency 리더보드
각 모델의 특성 Elo z-점수 평균을 벤치마크에서 평가된 모든 모델을 기준으로 1~100의 백분위 순위로 나타냅니다. 수염은 각 모델의 95% 신뢰 구간을 나타냅니다.
AA-PersonalityBench: Transparency 지수
진실하고 불확실성을 인정하며 아첨하지 않음 · truthful, admits uncertainty, disclaims assumptions, flags nuances 및 낮은 sycophantic에 걸친 각 모델의 Elo z-점수 평균 · 벤치마크에서 평가된 모든 모델 기준 1~100의 백분위 순위
구성 특성
Transparency은(는) 특성 5개의 z-점수화한 Elo로 구성됩니다. Sycophantic은(는) 반전되어 반영되므로, 이 특성이 약할수록 지수가 높아집니다. 특성을 열면 전체 리더보드를 볼 수 있습니다.
특성 리더보드
각 구성 특성의 Elo를 벤치마크에서 평가된 모든 모델을 기준으로 1~100의 백분위 순위로 나타냅니다.
AA-PersonalityBench: Truthful
답변이 지어낸 세부 내용이나 출처 없이 사실에 부합합니까? · 특성 Elo를 벤치마크에서 평가된 모든 모델 기준 1~100의 백분위 순위로 매긴 값입니다