XNews

Anthropic内部AI研发指标仪表盘

Anthropic内部AI研发指标仪表盘

Anthropic公开了其内部仪表盘,显示截至2026年7月,Claude主导了26%的AI研发工作(AL4级别),超过90%的任务涉及AI达到AL3或以上级别。该仪表盘还追踪了智能体监管情况,共有3万个智能体同时运行,6%的AI研发算力被分配给安全相关工作。

Key insights

AI主导Anthropic 26%的研发工作,接近自主化

Anthropic首次公开的内部仪表盘显示,截至2026年7月,Claude主导了该公司26%的AI研发工作,达到AL4(AI主导)级别。超过90%的研发任务涉及AI达到AL3或以上级别,表明深度协作或主导地位。然而,没有任何工作子集达到AL5(完全自主)。该指标基于每周对20%研发人员的抽样,总计约1.5万个任务,并按人工时间加权。这一基线为AI自我改进的速度提供了直接窗口。

安全监控:3万个智能体,干预率仅0.002%

Anthropic的监管系统包含两层:在线监控在执行前拦截100%的智能体行为,2026年8月分析了超过10亿次决策,干预率仅为0.002%(约每4.7万次中一次)。离线监控每周标记约10万条对话记录,其中约50条上报人工审核。低干预率可能表明系统运行良好,或监控过于宽松——报告承认了这一风险。该系统仅运行了几个月,其有效性仍在评估中。

算力分配:6%的AI研发投入用于安全

Anthropic的仪表盘包含一项硬性指标:在2026年7月13日至20日的一周内,所有AI研发计算任务中,约6%分配给了安全工作。若仅考虑AI驱动的AI研发,安全占比升至12%。这些是保守估计。算力分配被认为是最可验证且最不易被操纵的指标,可实现跨实验室比较,并可能为AI研发算力份额设定政策限制。

Source posts