Índices

AA-LCR v1.1AutomationBench-AATerminal-Bench 4.0SciCodeHumanity's Last ExamGDP.pdfCritPt

Artificial Analysis Intelligence Index v4.3.2

A composite benchmark aggregating ten challenging evaluations to provide a holistic measure of AI capabilities across mathematics, science, coding, and reasoning.

NegóciosFinançasDireitoMedicinaHumanidadesProgramaçãoCiênciaMatemáticaAgênticoTrabalho do conhecimentoUso de ferramentasRedaçãoRaciocínioSeguimento de instruçõesMultimodalContexto longoFidelidade
Artificial Analysis Coding Agent Index

Artificial Analysis Coding Agent Index

Um índice composto do desempenho de agentes de programação em tarefas de engenharia de software de ponta a ponta, comparado entre agentes, modelos e configurações de execução.

ProgramaçãoAgênticoUso de ferramentasRaciocínioSeguimento de instruções
Artificial Analysis Search Index

Artificial Analysis Search Index

Um índice composto da qualidade de Search APIs em busca agêntica, que combina cada provedor com o mesmo modelo de resposta para medir o ganho que ele proporciona.

FidelidadeRaciocínioAgênticoUso de ferramentas
Cyber Index Alliance Launch ArticleCWE-bench (Collinear AI)DeepsecBench (Vercel)CyberGym-E2E (Berkeley RDI)
New

Artificial Analysis Cyber Index

A composite index of model capability on cyber defense, combining three evaluations of finding and fixing vulnerabilities in real software repositories.

ProgramaçãoAgênticoUso de ferramentasRaciocínio
AA-Omniscience-DecisionHLE-MultiChoiceWhen2CallWildGuardTest
New

Artificial Analysis Decision Index

A composite index testing decision models across classification, tool calling, knowledge and reasoning.

HumanidadesNegóciosFinançasDireitoMedicinaCiênciaMatemáticaFidelidadeRaciocínioUso de ferramentas
Open Source Models

Artificial Analysis Openness Index

A composite measure providing an industry standard to communicate model openness for users and developers.

AA-LCR v1.1Humanity's Last ExamAutomationBench-AAGDP.pdf

Finance & Accounting Index

Mede o desempenho em finanças e contabilidade, incluindo conhecimento empresarial, trabalho de conhecimento agêntico, raciocínio, uso agêntico de ferramentas, análise de contexto longo e não alucinação.

FinançasNegóciosAgênticoTrabalho do conhecimentoRaciocínioUso de ferramentasContexto longoFidelidade
AA-LCR v1.1AutomationBench-AAGDP.pdf

Strategy & Ops Index

Mede o desempenho em estratégia e operações, incluindo conhecimento empresarial, trabalho de conhecimento agêntico, uso agêntico de ferramentas em aplicativos empresariais e análise de contexto longo.

NegóciosAgênticoTrabalho do conhecimentoUso de ferramentasContexto longo
AA-LCR v1.1Humanity's Last ExamGDP.pdfAutomationBench-AA

Legal Index

Mede o desempenho no domínio jurídico, incluindo conhecimento jurídico, trabalho de conhecimento agêntico, raciocínio, análise de documentos de contexto longo, não alucinação e uso agêntico de ferramentas.

DireitoAgênticoTrabalho do conhecimentoRaciocínioContexto longoFidelidadeUso de ferramentas
AA-Briefcase v1.1MLCR-AAHumanity's Last ExamAutomationBench-AA

Healthcare & Medical Index

Mede o desempenho em medicina e saúde, incluindo conhecimento clínico, trabalho de conhecimento agêntico, raciocínio de contexto longo sobre prontuários, não alucinação, raciocínio clínico e uso agêntico de ferramentas.

MedicinaAgênticoTrabalho do conhecimentoContexto longoFidelidadeRaciocínioUso de ferramentas
AA-Briefcase v1.1Humanity's Last ExamCritPtTerminal-Bench 4.0

Engineering Index

Mede o desempenho em engenharia, incluindo conhecimento de engenharia, raciocínio quantitativo, execução agêntica e uso agêntico do terminal.

CiênciaRaciocínioAgênticoTrabalho do conhecimentoProgramação
AA-LCR v1.1Humanity's Last Exam

Economics Index

Mede o desempenho em economia, incluindo conhecimento econômico, raciocínio quantitativo, execução agêntica e análise de contexto longo.

NegóciosRaciocínioAgênticoTrabalho do conhecimentoContexto longo