Cursor 云代理将 Slack 界面重建为代码生成视频

一个在 Linux 远程桌面上运行 Chrome 的 Cursor 云代理打开了真实的 Slack,并在未反编译该应用的情况下,将其界面重建为代码生成的动态视频。该代理从实际产品中提取视觉与缓动模式,制作了频道和话题串素材,并在渲染与对比循环中迭代。该工作流已被固化为可复用的动效技能。
事件版本 1.
Key insights
未涉及反编译
该代理被告知要构建什么并获得了视频参考,然后在其自己的计算机上打开真实的 Slack,以提取视觉与缓动/动效模式。Slack 未被反编译。
视频即代码实现视觉验证
将视频素材生成为代码,使正确性转变为输出能否渲染或编译并符合预期。模型将渲染输出与真实参考进行核对,然后修改代码。
内循环与外循环
内循环让代理执行操作、与真实事物对比、依据明确的失败标准进行修复,并持续进行直到移交人工审核。外循环则是人类提供参考、偏好和访问权限,并对产物、截图和分析结果进行评判。
从工作流到抽象的阶梯
路径从一次性完成任务,到将其固化为技能,再到将抽象推广到 Slack 之外的其他产品,最终实现外循环的自动化。
技能记录故障修复
当代理失败时,会调试原因并写入技能中,以便后续代理继承修复方案并消除该类问题。