Muse Code: Coding Agent Indexスコア、性能、価格
他のコーディングエージェントと比較すると、Muse CodeのCoding Agent Indexスコアは平均以上です。また、処理速度は平均より速い水準です。最良の結果はMuse Wonder Full (Max)との組み合わせで、6種類のモデルでテストしました。
Muse Wonder Full (Max)を使用したMuse CodeのArtificial Analysis Coding Agent Indexスコアは59で、コーディングエージェントの中では平均以上です(中央値:49)。
Muse Wonder Full (Max)を使用したMuse Codeのタスクあたりの時間は34.9mで、平均より速い水準です(中央値:36.1m)。
パフォーマンス
Artificial Analysis Coding Agent Indexにおけるパフォーマンス。
Artificial Analysis Coding Agent Index
Artificial Analysis Coding Agent Index vs. タスクあたりのコスト
トークン使用量
Artificial Analysis Coding Agent Indexにおけるトークン消費量。合計使用量、トークン構成、効率、ベンチマークごとの内訳を含みます。
タスクあたりのトークン使用量
Artificial Analysis Coding Agent Index vs. 合計トークン
コスト
現在のトークン単位のAPI料金に基づく Artificial Analysis Coding Agent Indexのコスト。利用可能な場合はキャッシュ書き込み料金やキャッシュ割引を含みます。多くのユーザーはトークン従量課金ではなくサブスクリプションプランを通じてコーディングエージェントのハーネスを利用します。
タスクあたりのコスト
実行時間
Artificial Analysis Coding Agent Indexにおけるエージェントの実稼働時間。
タスクあたりの時間
Artificial Analysis Coding Agent Index vs. 実行時間
安全性拒否
Artificial Analysis Coding Agent Indexにおいて、プロバイダーまたはモデルが安全上の理由でタスクの続行を拒否した頻度。
安全性拒否率
報酬ハッキング
本来は合格となる試行のうち、評価の公正性に関する違反により0点となったものが、全試行に占める割合。