Microsoft Copilot 视觉是一种在你使用 Windows 电脑或 Mac、在 Microsoft Edge 中浏览 Web 或通过手机查看世界时让 AI 与你协作的全新方式。 它就像第二双眼睛,可以扫描、分析并根据 Copilot 看到的内容提供见解。 启动 Copilot 视觉会话时,Copilot 可以查看你选择共享的屏幕、应用、页面或移动相机源,然后使用 Copilot 语音回答问题并指导你完成所看到的内容。
注意
Copilot 视觉 不会使用视觉会话中的数据来训练模型。 会话数据最多可暂时保留 47 小时,以支持用户提交的反馈,如果未提交任何反馈,会话数据将自动删除。 你与 Vision 的对话记录会保存在聊天历史记录中,以便你以后可以重新访问。 您的对话历史记录不用于培训或个性化,您可以随时将其删除。
Copilot 视觉 可用性在推出期间可能会有所不同。 视觉在所有 受支持的区域和语言 中可用,并且可以从 iOS 和 Android 上的 Windows、Edge 和 Copilot 移动应用访问。 必须订阅 Microsoft 365 个人版、家庭版或高级版才能访问 Copilot 视觉。
Copilot 视觉 如何处理数据
Copilot 视觉仅在启动视觉会话时才处于活动状态。 它将根据 Microsoft 的隐私声明处理你的数据。
使用 Vision 时,可能会记录 Copilot 响应,以帮助监视不安全的交互和输出。 用户输入、图像、音频和共享页面内容不用于训练模型或个性化你的体验。 会话数据最多可暂时保留 47 小时,以支持用户提交的反馈,如果未提交任何反馈,会话数据将自动删除。
Vision 不会代表你直接与电脑、Web 或手机交互。 它是用来回答问题和指导你的,而不是为你采取行动。 Copilot 视觉可能会突出显示屏幕的某些部分以帮助你查找相关信息,但它不会代表你单击、输入文本或滚动。
首次在 Windows、macOS、Edge 或 Copilot 移动版中使用视觉时,Copilot 会要求你确认隐私声明。
视觉适用于在 Copilot Web 和移动应用中使用其 Entra ID 登录的商业用户。
在 Windows 上使用 Copilot 视觉
借助 Copilot 视觉,可以在活动会话期间与 Copilot 共享所选浏览器、窗口或应用。 Copilot 可以回答有关你选择共享的内容的问题,并提供分步指导。
当视觉会话处于活动状态时,Copilot 可以回答有关你共享的应用或浏览器窗口的问题,即使它们不再在你面前打开。 视觉会话结束后,Copilot 将立即停止观察你共享的内容,并且共享上下文将不再可用于活动的视觉会话。
Copilot 视觉适用于 Windows 上的任何应用。 但是,如果内容包含有害或受 DRM 保护的材料,Copilot 无法对其进行分析。
若要在 Windows 上使用 Copilot 视觉,请执行以下操作:
- 在 Copilot 中开始语音通话。 默认情况下,视觉处于关闭状态。
- 要将 Vision 添加到 Voice 会话,请选择 “共享屏幕”。
- 选择要与 Copilot 共享的屏幕或应用。 当 Copilot 视觉处于活动状态时,你将在共享屏幕或应用周围看到一个轮廓。 一次最多可共享两个应用。
- 确保麦克风和音频已启用。 Copilot 视觉 使用语音输入和输出来回答有关你正在共享的内容的问题。
- 此时会出现一个浮动工具栏,其中包含视觉和语音控件。 Copilot 将向你打招呼,你可以开始询问有关共享内容的问题。
- 若要将自己静音,请选择麦克风图标 麦克风
。 这将停止 Copilot 侦听。 再次选择麦克风图标以继续。 - 要结束 Vision 会话,请在浮动工具栏中选择 “停止” 。 会话结束后,Copilot 立即停止观察共享内容。
在 Edge 中使用 Copilot 视觉
Copilot 视觉 适用于大多数网站和页面,但包含有害或成人内容的网站和页面除外。 访问 Copilot 视觉 不支持的网站时,屏幕底部的 Copilot 编辑器将显示灰色图标,并且 Copilot 不会讨论页面的内容。
若要在 Edge 中使用 Copilot 视觉,请执行以下操作:
- 使用个人 Microsoft 帐户登录到 Edge。
- 选择 Edge 工具栏中的 Copilot 图标。
- 选择语音 (波) 按钮
。 - 使用 Copilot 启动语音会话。
- 选择 “共享屏幕” 以将 Vision 添加到语音会话。
- 转到要询问 Copilot 的任何受支持网站、视频或 PDF。 使用视觉时,Copilot 侧边窗格中的工具栏可告知视觉会话处于活动状态。 当你从一个页面浏览到另一个页面时,视觉一直伴随着你,直到你准备好结束会话。
- 询问 Copilot 有关你正在查看的页面或内容的问题。
- 若要停止会话,请在 Copilot 窗口底部的工具栏中选择 X 、关闭 Copilot 侧窗格或退出 Edge。
在移动设备上使用 Copilot 视觉
注意
移动视觉功能即将推出。 移动视觉和屏幕共享正在 iOS 和 Android 设备上逐步启用,因此在推出期间可用性可能因用户而异。
可以在 iOS 和 Android 设备上的 Copilot 移动应用中访问 Copilot 视觉。 Copilot 视觉 根据它通过移动设备、摄像头或屏幕看到的内容回答问题。
若要在移动设备上使用 Copilot 视觉,请执行以下操作:
- 在 Copilot 移动应用中,开始与 Copilot 的语音会话,然后选择 “共享屏幕”。 这将启动移动设备相机。
- 需要授予 Copilot 应用访问设备相机的权限才能使用此功能。
- 与 Copilot 交谈,并询问有关你通过相机或屏幕上看到的内容的问题。 Copilot 视觉将保持打开状态,直到结束视觉会话。
- 若要结束 Copilot 视觉会话,请选择 X。