XNews

Google Android Bench 2.0:AIエージェント向けの現実的なAndroid開発ベンチマーク

Google Android Bench 2.0:AIエージェント向けの現実的なAndroid開発ベンチマーク

GoogleはAndroid Bench 2.0を発表しました。これは、本番アプリの実際のAndroid開発タスクにおけるモデル+エージェントの組み合わせを評価するベンチマークです。30のタスクには、アプリ変換、アーキテクチャ移行、新機能開発が含まれます。最高のモデルでも合格率はわずか28%にとどまり、多くのタスクはどのモデルも解決できませんでした。

Source posts