XNews

AI计算机控制与上下文功能

AI计算机控制与上下文功能

豆包推出云电脑模式与手机控制功能。关键事实: - 豆包支持通过手机控制本地电脑。 - 连接时,用户在本地电脑上发起聊天,同步至手机,并在手机上点击授权即可;电脑端无需任何操作。 - 响应速度被描述为快速,延迟低。 - 云电脑模式提供一台虚拟机,内置MCP连接器,可连接Notion、GitHub、飞书和企业微信。 - 云电脑可安装技能(Skills)。 - 在测试中,它找到了飞书会议纪要并整理了待办事项。 - 一条手机指令在云电脑上安装了社交媒体卡片技能,并根据待办事项运行任务。 - 云电脑与本地电脑之间的跨端控制被报告为流畅。 - 在本地电脑上,它找到了指定目录中的文件并清理了大文件。 - 手机可直接下达清理任务并查看结果。 - 将手机控制用作文件传输助手时,仅指示其接收图片而不做额外响应,系统仅接收图片无多余操作。 - 建议为纯文件传输用途单独开设一个带提示词的聊天窗口。 - Codex新增了计算机历史功能以扩展上下文收集。 - 有人对其价值、副作用、屏幕录制、OCR、音频转录以及是否实时处理而不保存数据提出了疑问。

Key insights

豆包云电脑模式与手机控制功能上线

豆包推出云电脑模式,并支持手机控制本地电脑。连接设计被描述为自然,体验优于Codex。用户先在本地电脑上聊天,手机同步后,在手机上轻点授权即可获得控制权,电脑端无需任何操作。响应速度被描述为非常快,延迟极低。

云电脑连接器与上下文访问

云电脑模式是一台虚拟机,内置称为MCP的连接器。它可直接连接Notion、GitHub、飞书和企业微信以获取用户上下文。云电脑还可安装技能。该功能允许在云电脑环境中使用外部应用数据。

技能安装与跨端任务执行

在测试中,豆包在云电脑上找到了所有飞书会议纪要并整理了待办事项。一条来自手机的命令在云电脑上安装了一个自研的社交媒体卡片技能。随后根据待办事项运行任务。云电脑与本地电脑之间的跨端控制被报告为流畅。

本地电脑文件操作

在本地电脑上,豆包找到了指定目录中的文件并清理了大文件。该过程利用了本地电脑访问权限。手机可直接下达清理任务并查看结果。同一系统通过手机控制支持这些任务。

文件传输助手模式

手机控制被用作文件传输助手。当发送手机截图并指示仅接收图片而不做额外响应时,系统接收了图片且无多余操作。建议为接收文件和图片而不产生额外响应的情况单独开设一个带提示词的聊天窗口。

Codex计算机历史功能

Codex新增了计算机历史功能以扩展上下文收集。有人质疑用户是否已启用该功能、其价值及潜在副作用。该实现被比作Rewind,并提出了关于屏幕录制、OCR、音频转录、实时处理及数据保留的开放性问题。

Source posts