Artificial Analysis Decision Index
Cloudflare
Clef-Omni: リリース、Decision Indexスコア、性能、価格
モデル概要
他の意思決定モデルと比較すると、Clef-OmniのDecision Indexスコアは下位で、料金は特に高価です。また、処理速度は平均より速い水準です。このモデルはテキスト、画像入力に対応し、コンテキストウィンドウは64kトークンです。
Clef-OmniのArtificial Analysis Decision Indexスコアは44で、意思決定モデルの中では下位です(中央値:53)。
Clef-Omniのタスクあたりの時間は172 msで、平均より速い水準です(中央値:188 ms)。
Clef-Omniの料金は入力100万トークンあたり$0.15です。Decision IndexでClef-Omniを実行する平均コストは100万タスクあたり$123です(高価、中央値:$32)。
| 開発元 | Cloudflare |
|---|---|
| プロバイダー | Cloudflare |
| 入力モダリティ | 対応:テキスト、画像 |
| コンテキストウィンドウ | 64k |
| 入力料金 | 100万トークンあたり$0.15 |
スコア
Artificial Analysis Decision Index
Weighted average of AA-Omniscience-Decision, HLE-MultiChoice, When2Call and WildGuardTest · Higher is better
Artificial Analysis Decision Index vs. 100万タスクあたりのコスト
Artificial Analysis Decision Index score vs. average cost per 1 million tasks (USD) · Lower is better
Most attractive quadrant
Pareto line
キャリブレーション
Artificial Analysis Decision Index:キャリブレーション
モデルが選んだ回答に付けた確率に対する正答率 · 0.1刻みの区間(回答20件以上) · 各ベンチマークを均等に重み付け
言語モデルのキャリブレーションは近日公開予定です。
時間
Artificial Analysis Decision Index:タスクあたりの時間
Median time per task over every task across all Artificial Analysis Decision Index evaluations · Lower is better
コスト
Artificial Analysis Decision Index:100万タスクあたりのコスト
Average cost per 1 million tasks across all Artificial Analysis Decision Index evaluations at current prices (USD) · Lower is better