XNews

Tencent Hunyuan、情報進化を評価するベンチマーク「EvolveScaler」を公開

Tencent Hunyuan、情報進化を評価するベンチマーク「EvolveScaler」を公開

Tencent Hunyuanは、40日間のRPGログを用いて、撤回・修正・バックフィルによって進化する情報を処理するAIの能力をテストするベンチマーク「EvolveScaler」を公開した。117のプロトタイプからなるベンチマークの最も難しい段階では、14のフロンティアモデルにおいて中央値精度が11.3%に低下したが、このデータでの学習により、8つの分布外ベンチマークで平均パフォーマンスが5.25ポイント向上した。

Source posts