所有发布

DeepSeek V4.1 Flash 1017 vs. Hermes 4 - Llama-3.1 405B:发布比较

DeepSeek V4.1 Flash 1017 与 Hermes 4 - Llama-3.1 405B 发布比较:分别包含 2 个和 2 个模型,各自具有不同的智能、性能与价格特征。下方对全部 4 个模型的关键指标进行了比较。

  • 输出速度方面,DeepSeek V4.1 Flash 1017 最快:DeepSeek V4.1 Flash 1017 (Non-reasoning)(1,486 token/秒),Hermes 4 - Llama-3.1 405B 为 Hermes 4 - Llama-3.1 405B (Reasoning)(40 token/秒)。
模型 Playground

比较的发布

DeepSeek V4.1 Flash 1017 (max)DeepSeek V4.1 Flash 1017 (non-reasoning)Hermes 4 405BHermes 4 405B (non-reasoning)
Intelligence Index
32
19
--
--
财务与会计
42
37
--
--
战略与运营
49
40
--
--
法律
38
32
--
--
医疗与健康
41
--
--
--
每任务成本美元
$0.60
--
--
--
输出速度Token/秒
175
1,486
40
38
首 Token 延迟秒
1.10
1.15
2.38
2.34
上下文窗口
1M
1M
128k
128k
开发商
DeepSeek
DeepSeek
Nous Research
Nous Research
许可证
开放
开放
开放
开放
输入模态

支持:文本和图像

支持:文本和图像

支持:文本

支持:文本

输出模态

支持:文本

支持:文本

支持:文本

支持:文本

服务商
DeepSeekInco
Nebius
Nebius
Updated
Artificial Analysis Intelligence Index · Higher is better
Output tokens per second · Higher is better
Weighted average cost (USD) per Intelligence Index task · Lower is better

智能Updated

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v5.0 incorporates 9 evaluations: AA-Briefcase v1.1, AutomationBench-AA, Terminal-Bench 4.0, FrontierCode 2.0, AA-Omniscience v1.1, GDP.pdf, HLE-Diamond, CritPt v2 (Hard Subset), and Terminal-Bench-Science 0.1

Intelligence Index 与每项任务的成本

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task
Most attractive quadrant
Pareto line

单任务成本(美元,对数刻度)

成本

每项 Intelligence Index 任务的成本

Weighted average cost (USD) per Intelligence Index task · Segmented by token type · Lower is better

速度与延迟

输出速度

Output tokens per second · Higher is better

能力得分

能力指数

衡量模型在特定能力与行业中的表现
Finance & Accounting Index

Incorporates 5 evaluations: AA-Briefcase v1.1, AA-Omniscience v1.1, HLE-Diamond, AutomationBench-AA, GDP.pdf · Higher is better

Strategy & Ops Index

Incorporates 4 evaluations: AutomationBench-AA, AA-Briefcase v1.1, AA-Omniscience v1.1, GDP.pdf · Higher is better

Legal Index

Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf, AutomationBench-AA · Higher is better

Healthcare & Medical Index

Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, MLCR-AA, AutomationBench-AA, HLE-Diamond · Higher is better

Engineering Index

Incorporates 7 evaluations: AA-Omniscience v1.1, CritPt v2 (Hard Subset), Terminal-Bench-Science 0.1, HLE-Diamond, Terminal-Bench 4.0, FrontierCode 2.0, AA-Briefcase v1.1 · Higher is better

Economics Index

Incorporates 4 evaluations: AA-Briefcase v1.1, AA-Omniscience v1.1, HLE-Diamond, GDP.pdf · Higher is better

AA-PersonalityBenchNew

性格指数

每个轴对应 8 个性格指数之一:其特质 Elo z 分数的平均值,在基准测试中所有已评估模型之间换算为 1 到 100 的百分位排名