모든 릴리스

Hermes 4 - Llama-3.1 405B vs. gpt-oss-20b: 릴리스 비교

Hermes 4 - Llama-3.1 405B와 gpt-oss-20b 릴리스 비교: 각각 2개, 2개 모델이며 지능, 성능, 가격 특성이 서로 다릅니다. 아래에서 전체 4개 모델의 주요 지표를 비교합니다.

  • 지능 부문에서 gpt-oss-20b가 가장 높습니다. gpt-oss-20b (Low)(10), Hermes 4 - Llama-3.1 405B는 Hermes 4 - Llama-3.1 405B (Reasoning)(7)입니다.
  • 출력 속도가 가장 빠른 것은 gpt-oss-20b입니다. gpt-oss-20b (Low)(294 토큰/초), Hermes 4 - Llama-3.1 405B는 Hermes 4 - Llama-3.1 405B (Reasoning)(40 토큰/초)입니다.
모델 플레이그라운드

비교 중인 릴리스

gpt-oss-20b (low)gpt-oss-20b (high)Hermes 4 405BHermes 4 405B (non-reasoning)
Intelligence Index
10*
9
7*
7*
재무 및 회계
--
7
--
--
전략 및 운영
--
5
--
--
법률
--
7
--
--
의료 및 헬스케어
--
7
--
--
작업당 비용USD
--
$0.01
--
--
출력 속도토큰/초
294
230
40
37
첫 토큰까지 걸린 시간초
0.74
0.69
2.36
2.33
컨텍스트 창
131k
131k
128k
128k
개발사
OpenAI
OpenAI
Nous Research
Nous Research
라이선스
오픈
오픈
오픈
오픈
입력 모달리티

지원: 텍스트

지원: 텍스트

지원: 텍스트

지원: 텍스트

출력 모달리티

지원: 텍스트

지원: 텍스트

지원: 텍스트

지원: 텍스트

제공업체
GroqHyperbolicCoreWeave
+2
CoreWeaveAmazon BedrockDeepInfra
+3
Nebius
Nebius

* 추정치

지능

Artificial Analysis Intelligence Index · Higher is better

속도

Output tokens per second · Higher is better

작업당 비용

Weighted average cost (USD) per Intelligence Index task · Lower is better

지능

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v4.3.2 incorporates 10 evaluations: AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1
Estimate (independent evaluation forthcoming)

Intelligence Index와 작업당 비용

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task
Most attractive quadrant
Pareto line
AA-Briefcase v1.1
GDPval-AA v2.1

작업당 비용(USD, 로그 눈금)

비용

Intelligence Index 작업당 비용

Weighted average cost (USD) per Artificial Analysis Intelligence Index task, segmented by token type. Lower is better

속도 및 지연 시간

출력 속도

Output tokens per second · Higher is better

역량 점수

역량 지수

특정 역량 및 산업에서 모델의 성능을 측정
Finance & Accounting Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Strategy & Ops Index

Incorporates 6 evaluations: GDPval-AA v2.1, AA-Briefcase v1.1, AA-Omniscience, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Legal Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AA-LCR v1.1, GDP.pdf, AutomationBench-AA · Higher is better

Healthcare & Medical Index

Incorporates 6 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, MLCR-AA, Humanity's Last Exam, AutomationBench-AA · Higher is better

Engineering Index

Incorporates 6 evaluations: AA-Omniscience, Humanity's Last Exam, CritPt, GDPval-AA v2.1, AA-Briefcase v1.1, Terminal-Bench 4.0 · Higher is better

Economics Index

Incorporates 5 evaluations: AA-Omniscience, Humanity's Last Exam, GDPval-AA v2.1, AA-Briefcase v1.1, AA-LCR v1.1 · Higher is better