XNews

Google、Android Bench 2.0を公開、実世界のAndroid開発向けベンチマーク

Google、Android Bench 2.0を公開、実世界のAndroid開発向けベンチマーク

GoogleはAndroid Bench 2.0をリリースした。これは、実運用アプリからの実際のAndroid開発タスクにおけるモデルとエージェントのパフォーマンスを測定するベンチマークである。最高スコアはGPT-6 Astra+CodexとClaude Fable 5.1+Claude Code。多くのタスク、特にXMLからComposeへの移行では、合格数がゼロだった。

Source posts