지수

AA-Omniscience v1.1AutomationBench-AATerminal-Bench 4.0FrontierCode 2.0GDP.pdfHLE-DiamondCritPt v2 (Hard Subset)Terminal-Bench-Science 0.1
Updated

Artificial Analysis Intelligence Index v5.0.1

A composite benchmark aggregating nine challenging evaluations to provide a holistic measure of AI capabilities across knowledge work, coding, science, and general knowledge.

비즈니스코딩인문학금융법률의료과학수학에이전트지식 업무도구 사용글쓰기추론지시 준수충실성멀티모달긴 컨텍스트
Artificial Analysis Progress Index v1
New

Artificial Analysis Progress Index v1

시간이 지나도 일관된 하나의 척도로 나타낸 언어 모델 역량으로, 문항 반응 이론으로 추정해 수년 차이로 출시된 모델도 비교할 수 있습니다.

Artificial Analysis Coding Agent Index

Artificial Analysis Coding Agent Index

엔드투엔드 소프트웨어 엔지니어링 작업에서 코딩 에이전트의 성능을 측정하는 복합 지수로, 에이전트, 모델, 실행 설정별로 비교합니다.

코딩에이전트도구 사용추론지시 준수
Artificial Analysis Search Index

Artificial Analysis Search Index

에이전트 기반 검색에서 Search API 품질을 측정하는 복합 지수로, 모든 제공업체를 동일한 답변 모델과 짝지어 각 제공업체가 가져오는 향상 폭을 측정합니다.

충실성추론에이전트도구 사용
Cyber Index Alliance Launch ArticleCWE-bench (Collinear AI)DeepsecBench (Vercel)CyberGym-E2E (Berkeley RDI)

Artificial Analysis Cyber Index

A composite index of model capability on cyber defense, combining three evaluations of finding and fixing vulnerabilities in real software repositories.

코딩에이전트도구 사용추론
AA-Omniscience-DecisionHLE-MultiChoiceWhen2CallWildGuardTest
New

Artificial Analysis Decision Index

A composite index testing decision models across classification, tool calling, knowledge and reasoning.

인문학비즈니스금융법률의료과학수학충실성추론도구 사용
Open Source Models

Artificial Analysis Openness Index

A composite measure providing an industry standard to communicate model openness for users and developers.

AA-Omniscience v1.1HLE-DiamondAutomationBench-AAGDP.pdf

Finance & Accounting Index

비즈니스 지식, 에이전트형 지식 작업, 추론, 에이전트형 도구 사용, 장문 맥락 분석, 환각 방지를 포함해 재무 및 회계 분야의 성능을 측정합니다.

금융비즈니스에이전트지식 업무추론충실성도구 사용긴 컨텍스트
AutomationBench-AAAA-Omniscience v1.1GDP.pdf

Strategy & Ops Index

비즈니스 지식, 에이전트형 지식 작업, 비즈니스 앱에서의 에이전트형 도구 사용, 장문 맥락 분석, 환각 방지를 포함해 전략 및 운영 분야의 성능을 측정합니다.

비즈니스에이전트도구 사용지식 업무긴 컨텍스트충실성
AA-Briefcase v1.1HLE-DiamondGDP.pdfAutomationBench-AA

Legal Index

법률 지식, 에이전트형 지식 작업, 추론, 장문 맥락 문서 분석, 환각 방지, 에이전트형 도구 사용을 포함해 법률 분야의 성능을 측정합니다.

법률에이전트지식 업무추론충실성긴 컨텍스트도구 사용
AA-Briefcase v1.1MLCR-AAAutomationBench-AAHLE-Diamond

Healthcare & Medical Index

임상 지식, 에이전트형 지식 작업, 환자 기록에 대한 장문 맥락 추론, 환각 방지, 임상 추론, 에이전트형 도구 사용을 포함해 의료 및 헬스케어 분야의 성능을 측정합니다.

의료에이전트지식 업무긴 컨텍스트도구 사용충실성추론
AA-Briefcase v1.1CritPt v2 (Hard Subset)Terminal-Bench-Science 0.1HLE-DiamondTerminal-Bench 4.0FrontierCode 2.0

Engineering Index

공학 지식, 과학, 추론, 에이전트형 코딩, 에이전트형 지식 작업을 포함해 공학 분야의 성능을 측정합니다.

과학추론에이전트코딩지식 업무
AA-Briefcase v1.1HLE-DiamondGDP.pdf

Economics Index

경제학 지식, 정량적 추론, 에이전트형 실행, 장문 맥락 분석을 포함해 경제학 분야의 성능을 측정합니다.

비즈니스에이전트지식 업무추론긴 컨텍스트