Índices
Artificial Analysis Intelligence Index v5.0.1
A composite benchmark aggregating nine challenging evaluations to provide a holistic measure of AI capabilities across knowledge work, coding, science, and general knowledge.
Artificial Analysis Progress Index v1
A capacidade dos modelos de linguagem em uma única escala que se mantém consistente ao longo do tempo, estimada com a teoria de resposta ao item para comparar modelos lançados com anos de diferença.
Artificial Analysis Coding Agent Index
Um índice composto do desempenho de agentes de programação em tarefas de engenharia de software de ponta a ponta, comparado entre agentes, modelos e configurações de execução.
Artificial Analysis Search Index
Um índice composto da qualidade de Search APIs em busca agêntica, que combina cada provedor com o mesmo modelo de resposta para medir o ganho que ele proporciona.
Artificial Analysis Cyber Index
A composite index of model capability on cyber defense, combining three evaluations of finding and fixing vulnerabilities in real software repositories.
Artificial Analysis Decision Index
A composite index testing decision models across classification, tool calling, knowledge and reasoning.
Artificial Analysis Openness Index
A composite measure providing an industry standard to communicate model openness for users and developers.
Finance & Accounting Index
Mede o desempenho em finanças e contabilidade, incluindo conhecimento empresarial, trabalho de conhecimento agêntico, raciocínio, uso agêntico de ferramentas, análise de contexto longo e não alucinação.
Strategy & Ops Index
Mede o desempenho em estratégia e operações, incluindo conhecimento empresarial, trabalho de conhecimento agêntico, uso agêntico de ferramentas em aplicativos empresariais, análise de contexto longo e não alucinação.
Legal Index
Mede o desempenho no domínio jurídico, incluindo conhecimento jurídico, trabalho de conhecimento agêntico, raciocínio, análise de documentos de contexto longo, não alucinação e uso agêntico de ferramentas.
Healthcare & Medical Index
Mede o desempenho em medicina e saúde, incluindo conhecimento clínico, trabalho de conhecimento agêntico, raciocínio de contexto longo sobre prontuários, não alucinação, raciocínio clínico e uso agêntico de ferramentas.
Engineering Index
Mede o desempenho em engenharia, incluindo conhecimento de engenharia, ciência, raciocínio, programação agêntica e trabalho de conhecimento agêntico.
Economics Index
Mede o desempenho em economia, incluindo conhecimento econômico, raciocínio quantitativo, execução agêntica e análise de contexto longo.