Artificial Analysis、データプレイグラウンドにカスタムインデックスビルダーを公開

Artificial Analysisはデータプレイグラウンドにカスタムインデックスビルダーを導入し、ユーザーが任意のArtificial Analysisベンチマークを追加し、重みをカスタマイズし、結果を他のチャート軸に対してプロットできるようにした。モデルは、インデックス内のすべての評価の結果を持つ場合にのみスコアを受け取る。これはIntelligence Indexの方法論と一致する。データプレイグラウンドには、数式メトリクス、ローンチ日再生、ヒートマップ、箱ひげ図分布、シートとダッシュボードビューを備えたワークベンチも含まれ、Artificial Analysis Proで利用可能である。
イベントのバージョン 1.
Key insights
カスタムインデックスの構築
ユーザーは任意のArtificial Analysisベンチマークを追加し、重みをカスタマイズしてカスタムインデックスを構築できる。結果は他のチャート軸とともにプロットできる。
完全カバレッジのスコアリングルール
モデルは、カスタムインデックス内のすべての評価の結果を持つ場合にのみスコアを受け取る。これはIntelligence Indexの方法論と一致する。
データプレイグラウンドの追加機能
プレイグラウンドには、算術演算子やlog、sqrtなどの関数でメトリクスを組み合わせる数式メトリクスが含まれる。また、ローンチ日ごとの散布図の再生(各日付でフロンティアを描画)、評価間のヒートマップ、グループ別の箱ひげ図分布、シート、シェルフ、ダッシュボードビューを備えたワークベンチも提供する。
Proでの利用可能性
データプレイグラウンドはArtificial Analysis Proで利用可能である。