Todos os índices de capacidade
Índice de Engenharia
Avalia o desempenho dos modelos em engenharia. As capacidades avaliadas incluem conhecimento específico do domínio (engenharia civil, elétrica e mecânica), projeto e análise, ferramentas e automação, documentação técnica e muito mais.
Ver fluxos de trabalho representativosThe Artificial Analysis Engineering Index combines performance across benchmarks chosen for engineering work, spanning engineering knowledge, reasoning, agentic execution, and terminal use. We map common tasks from O*NET occupational classifications, then select benchmarks that represent this real-world work. Weights are derived from how often capabilities appear across those tasks.
This composite metric provides a single score for tracking model performance across engineering tasks. Todos os benchmarks subjacentes são executados de forma independente pela Artificial Analysis. Consulte nossa metodologia de benchmarking de inteligência para saber como as avaliações são realizadas.
| Capacidade | Peso | Avaliações |
|---|---|---|
| Conhecimento de engenharia | 35% | AA-Omniscience: Precisão em Ciência, engenharia e matemática |
| Raciocínio | 30% | HLE e CritPt |
| Trabalho de conhecimento agêntico | 20% | GDPval-AA v2.1 e AA-Briefcase v1.1 |
| Uso agêntico do terminal | 15% | Terminal-Bench 4.0 |
Pontuação
Artificial Analysis Índice de Engenharia
Artificial Analysis Índice de Engenharia: detalhamento das capacidades
Detalhamento das capacidades
Artificial Analysis Índice de Engenharia: Conhecimento de engenharia
Fluxos de trabalho representativos
Fluxos de trabalho reais que exercitam as capacidades às quais o Índice de Engenharia atribui mais peso.
Exemplo: Design and analyze a wind turbine support structure to size components against fatigue and extreme-wind load cases, justify safety margins against a governing standard such as IEC 61400, and maximize power output while reliably withstanding environmental stress.
Exemplo: Track an intermittent CFD pipeline failure through the CMake build and Conda environment on a Slurm cluster from the terminal, then ship a fix that spares adjacent batch jobs.
Exemplo: Read a vendor package of CAD schematics and dimensioned drawings to extract GD&T callouts, materials, and interface dimensions per ASME Y14.5, reconcile conflicts across sheets, and draft a specification that cites each source drawing.
Custo
Artificial Analysis Índice de Engenharia: custo por tarefa
Artificial Analysis Índice de Engenharia vs. custo por tarefa
Velocidade
Artificial Analysis Índice de Engenharia: tempo por tarefa
Tokens de saída
Artificial Analysis Índice de Engenharia: tokens de saída por tarefa
Data de lançamento
Artificial Analysis Índice de Engenharia vs. data de lançamento
Perguntas frequentes
Segundo o Índice de Engenharia da Artificial Analysis, os modelos de IA com melhor desempenho em trabalhos de engenharia atualmente são Claude Opus 5.5 (Max, Default Fallback) (60), Claude Opus 5.5 (Xhigh, Default Fallback) (59) e Claude Sonnet 5.5 (Max, Default Fallback) (58). O ranking é atualizado à medida que novos modelos são lançados.
Sim. O Índice de Engenharia da Artificial Analysis é um benchmark independente do desempenho de modelos de IA em trabalhos de engenharia. Ele mede conhecimento de engenharia, raciocínio quantitativo, execução agêntica e uso de terminal.
O Índice de Engenharia é um benchmark composto da Artificial Analysis que avalia o desempenho dos modelos em engenharia. As capacidades avaliadas incluem conhecimento específico (engenharia civil, elétrica e mecânica), projeto e análise, ferramentas e automação, documentação técnica e muito mais.
O Índice de Engenharia é calculado como a média ponderada das pontuações de suas capacidades. Estas são as pontuações e seus pesos: Conhecimento de engenharia (35%), Raciocínio (30%), Trabalho de conhecimento agêntico (20%) e Uso agêntico do terminal (15%).
O Índice de Engenharia inclui AA-Omniscience: Precisão em Ciência, engenharia e matemática, HLE, CritPt, GDPval-AA v2.1, AA-Briefcase v1.1 e Terminal-Bench 4.0.
Atualmente, Claude Opus 5.5 (Max, Default Fallback) tem a maior pontuação no Índice de Engenharia: 60 entre os modelos com resultados publicados. Ver modelo
Uma pontuação mais alta no Índice de Engenharia indica melhor desempenho geral nos benchmarks que compõem o índice. Para um caso de uso específico, os resultados de cada benchmark podem ser mais informativos que a pontuação composta.