XNews

Anthropicの内部AI開発指標ダッシュボード

Anthropicの内部AI開発指標ダッシュボード

Anthropicは内部ダッシュボードを公開し、2026年7月時点でClaudeがAI研究開発業務の26%(AL4)を主導し、タスクの90%以上がAL3以上でAIを関与させていることを明らかにした。また、ダッシュボードはエージェントの監視状況も追跡しており、3万のエージェントが同時に稼働し、AI研究開発の計算リソースの6%が安全性に割り当てられている。

Key insights

AIがAnthropicの研究開発業務の26%を主導、自律性に近づく

初めて公開されたAnthropicの内部ダッシュボードは、2026年7月時点でClaudeが同社のAI研究開発業務の26%を主導し、AL4(AI主導)の状態に達していることを示している。研究開発タスクの90%以上がAL3以上でAIを関与させており、深い協力または支配を示している。しかし、いかなる作業サブセットもAL5(完全自律)には達していない。この指標は、研究開発スタッフの20%を毎週サンプリングし、合計約1万5000タスクを対象とし、人間の時間で重み付けされている。このベースラインは、AI自己改善のペースを直接垣間見る窓を提供する。

安全性監視:3万エージェント、介入率0.002%

Anthropicの監視システムは2層で構成されている。オンライン監視は、実行前にエージェントの行動の100%を傍受し、2026年8月には10億件以上の決定を分析し、介入率はわずか0.002%(約4万7000件に1件)だった。オフライン監視は、毎週約10万件の会話ログにフラグを立て、そのうち約50件が人間によるレビューにエスカレーションされる。介入率の低さは、システムが適切に機能しているか、監視が過度に寛大であるかのいずれかを示す可能性があり、これは報告書が認めるリスクである。このシステムはまだ数か月しか経過しておらず、その有効性は評価中である。

計算リソース配分:AI研究開発費の6%が安全性に

Anthropicのダッシュボードには、ハードな指標が含まれている。1週間(2026年7月13日〜20日)のAI研究開発の全計算タスクのうち、約6%が安全性業務に割り当てられた。AI主導のAI研究開発のみを考慮すると、安全性の割合は12%に上昇する。これらは控えめな見積もりである。計算リソースの配分は、最も検証可能で操作が難しい指標と考えられており、ラボ間の比較や、AI研究開発の計算リソースシェアに対する潜在的な政策制限を可能にする。

Source posts