有关 Microsoft Copilot 中语音功能的常见问题解答

注意

本文中引用的语音功能正在逐步发布,可能尚未向所有用户推出。 即将向所有用户发布正式发布。

什么是在 Microsoft Copilot 中开始新的语音聊天?

开始新的语音聊天时,用户只需说话即可与 Copilot 进行自然的交互式对话。 语音聊天通过基于工作和 Web 数据的自然语音对话,提供了一种更快、更简单、更直观的方式来使用 Copilot。 像私人助手一样与 Copilot 交谈 - 随时中断和重定向 - 为工作日做准备、创建文档、了解主题,并在办公室、一线或路上快速搜索信息。 此功能利用 Web 和企业 Graph 基础来提高响应准确性并协助工作上下文查询。

进行语音聊天时,可以要求 Copilot 执行哪些操作?

像私人助手一样与 Copilot 交谈(随时中断和重定向),集思广益、准备会议或当天,并快速搜索信息。 只需说话,即可从 Microsoft Graph 中搜索 Web 和工作上下文。 它可以帮助解释概念、集思广益、共同创建、翻译等。

语音聊天的预期用例是什么?

工作并不止步于办公桌。 Microsoft Copilot 中的语音聊天可让你随时随地保持高效工作 - 在移动设备上无需提手,或在桌面上进行多任务处理。 它以工作和 Web 数据为基础,帮助你:

  • 准备和管理你的一天:在 Microsoft Copilot 应用中获取日历摘要,在 Outlook 移动版中使用“语音跟进”对收件箱和起草回复进行分类,向 Copilot 询问会议详细信息,例如预读和议程,以及随时随地搜索和阐明信息。 使用 Copilot 作为排练内容的指导。
  • 集思广益并创建: 与 Copilot 分享快速想法,它会提出阐明问题来帮助构建想法。 使用语音免提与 Copilot 交谈,同时继续工作。

用户如何与 Copilot 开始新的语音聊天?

  • 在移动设备和桌面设备上,选择 五个平行条以开始语音聊天在 Teams 麦克风图标旁边开始新的语音聊天消息 Copilot 撰写框的右下角开始听写
  • Windows 桌面版 Copilot 中的语音聊天也可以通过 Windows 快捷方式激活。 按 Copilot 键,或者对于没有 Copilot 键的设备,使用 Win+C 快捷方式打开计算机大纲窗口,以在 Copilot 应用中快速查看设置 显示相同图标的快速视图窗口以启动语音聊天。
  • 说“你好 Copilot”打开计算机大纲窗口,以在 Copilot 应用中快速查看设置 Windows 桌面上的快速视图控件。 然后,用户可以开始免提与 Copilot 交谈,而无需单击屏幕或图标。 聊天控件在桌面上保持打开状态,始终位于顶部,因为用户跨应用工作。 此功能要求用户在 Windows 设备上安装 Microsoft Copilot 应用,并在应用的“快速视图”设置中打开“你好 Copilot”。

如何打开“嘿 Copilot”功能?

若要打开“你好 Copilot”,用户必须启用该设置。 在 Windows 上的 Microsoft Copilot 应用中,转到...“设置”等,然后单击“快速查看”的计算机窗口大纲 Copilot 应用中的设置快速视图以打开“收听”你好 Copilot“控件。 “你好 Copilot”仅在显式呼叫时才会响应。

“Hey Copilot”是否在所有平台上都可用?

此功能目前仅在 Windows 桌面上可用。 Mac 很快就会跟进。

用户如何结束与 Copilot 的语音聊天?

若要静音或结束对话,用户必须选择 Teams 取消静音麦克风按钮关闭图标 关闭。 此时,Copilot 将停止收听。

如果用户在使用快速视图迷你工具栏时忘记结束语音聊天,Copilot 会继续收听多长时间?

30 秒没有 快速视图 控件的活动后,屏幕上将显示一条通知,警告 Copilot 将在 30 秒后自动结束会话。 背景噪音可能导致 Copilot 即使在你讲完后也会继续收听。

听写和语音聊天有何不同?

Microsoft Copilot 中的听写功能允许你通过讲话将语音转换为书面文本,非常适合免提撰写内容。 另一方面,语音聊天支持与 Copilot 进行双向语音对话,从而允许实时提问和接收音频答复。 听写侧重于文本输入,而语音聊天则提供更具交互性、可中断和动态的体验。

目前 Microsoft Copilot 中的语音聊天在哪里可用?

Microsoft Copilot 中的语音聊天现已在 Web 和 Microsoft 365 应用中提供, (iOS 和 Android) 和桌面 (Windows 和 Mac) 。 它将很快在 Microsoft Copilot 生态系统中推出。

没有 Microsoft Copilot 许可证的用户是否也可以使用语音与 Copilot 交互?

语音功能当前不适用于没有 Microsoft Copilot 许可证的用户;但是,这些用户将很快可用。

拥有 Microsoft Copilot 许可证的政府客户是否可以使用语音?

未来,政府社区云 (GCC) 和 GCC High 客户将可以使用语音功能,但目前没有要共享的日期。

语音支持哪些语言?

语音功能适用于 Microsoft Copilot 支持的所有语言。 有关完整列表,请参阅 Microsoft Copilot 支持的语言。 有些单词可能更容易出现语言或发音错误。

是否可以用其他语言说出“你好 Copilot”唤醒词来开始新的语音聊天?

不会,语音激活仅响应英语的“你好 Copilot”。 激活后,对话可以以任何受支持的 Copilot 语言继续。 有关详细信息,请参阅 Microsoft Copilot 支持的语言

语音是否支持 Microsoft Copilot 中提供的所有功能?

目前,并非所有支持使用文本的功能都可在语音聊天中使用,例如图像创建、文件创建和提及代理。

Copilot 是否可以在语音聊天期间使用我保存的记忆?

当用户处于 Microsoft Copilot 语音聊天中时,Copilot 可以使用已存储在用户 People 中的现有记忆进行响应 机器齿轮 用于 Copilot 个性化设置个性化设置。 出于隐私考虑,用户还无法修改或编辑语音聊天中的记忆。

可用于语音聊天中 Copilot 响应的所有记忆都可由用户在 People with machine cogs 中查看和管理 Copilot 个性化设置的齿轮 个性化设置。

有多少种语音选项可用?

目前,我们只支持一种语音选项。 将来将提供更多语音选项。

拥有 Microsoft Copilot 许可证的用户可以进行语音聊天多长时间?

Microsoft Copilot 中的语音功能受服务容量限制。 拥有 Microsoft Copilot 许可证的用户将有权优先访问 Copilot 中的语音。 当用户接近服务容量时,他们将在产品中收到通知。

了解如何在 Standard 访问 Copilot 服务,以及优先访问 Microsoft Copilot 对话助手 中的功能

用户是否必须停留在 Copilot 应用窗口中才能继续对话?

不,语音聊天在后台工作,允许用户在应用程序和多任务之间移动。

用户是否可以恢复之前的语音聊天?

是的,用户可以在 Microsoft Copilot 对话助手 中的聊天下找到他们过去的聊天,包括语音聊天。 选择上一个聊天后,用户可以使用 消息 Copilot 撰写框中的文本恢复聊天。

用户是否可以在其他应用中或锁定屏幕时继续聊天?

用户可以在移动到其他应用程序或桌面上的锁定屏幕时继续在后台进行语音聊天。 如果用户播放来自其他应用的音频,语音聊天中的音频将中断。

当桌面锁定时,“你好 Copilot” 快速视图 控件会自动关闭,因此屏幕锁定时语音激活将不起作用。

用户是否可以与 Copilot 代理进行语音聊天?

Copilot 代理当前不支持语音聊天,但即将推出。

语音聊天是否包含实时脚本?

是的,桌面设备默认支持实时转录。 可以通过应用程序右上角的 隐藏式字幕 (CC) 设置将其关闭,以减少干扰体验。 在移动设备上,默认情况下实时脚本处于关闭状态,但可以在语音聊天期间通过移动应用程序上的同一 隐藏式字幕 (CC) 按钮打开。

如果用户同时在 Microsoft Copilot 和 Microsoft Copilot 中打开“你好 Copilot”,该怎么办?

如果用户同时在 Microsoft Copilot 和 Microsoft Copilot 中打开“你好 Copilot”,则语音激活将在 Microsoft Copilot 中保持活动状态,并在 Microsoft Copilot 中自动关闭。

为什么如果用语音而不是文本询问,Copilot 的回复有时会有所不同?

语音和文本对话本质上是不同的。 Copilot 对这些不同的功能使用不同的模型,以最好地满足用户的需求。 用户在使用语音时可能会遇到较短的响应,但响应的准确性和质量不会受到影响。

Copilot 中的语音是否可通过 CarPlay 使用?

不能,目前无法通过 CarPlay 使用 Copilot 中的语音。

我在电视上看到广告,显示 Copilot 能够理解用户的屏幕 (视觉) ,这也可以通过语音激活。 它是否也适用于商业客户? 商业用户如何访问此功能?

视觉功能目前不适用于任何商业客户的 Microsoft Copilot。

Microsoft 如何存储用户与 Copilot 语音聊天的音频?

语音对话中的文本脚本的存储和管理方式与 Microsoft Copilot 应用中的文本对话相同。 不存储任何用户或 Copilot 音频。 有关 Copilot 数据保留的详细信息,请参阅 Microsoft Copilot 的数据、隐私和安全性

如果已启用反馈,则会临时存储对话音频,以便用户向 Microsoft 提供反馈。 用户的音频中可能包含背景噪音。 48 小时后,将删除此音频数据。 有关详细信息,请参阅使用 Microsoft 365 应用提供有关 Microsoft Copilot 的反馈

管理员是否可以在租户或组级别关闭与 Copilot 的语音聊天或“你好 Copilot”语音激活?

管理员没有特定于功能的开关来关闭 Copilot 中的语音功能或“嘿 Copilot”语音激活。

如何评估语音聊天? 哪些指标用于度量性能?

此功能衡量语音聊天的使用率、参与率和放弃率。 通过根据不同语言、环境和口音的相关性、搜索和幻觉标准测试模型的音频和文本输出,脱机衡量响应的质量。

有关详细信息,请访问 应用程序卡:Microsoft Copilot 以了解详细信息。

哪些操作因素和设置允许有效和负责任地使用语音聊天?

  • 用户能够在语音聊天中自然地说话,并且能够通过简单地说话来中断音频响应。 中断时,Copilot 将停止说话并收听用户的声音,并根据新的语音输入提供新的响应。
  • 为了获得最佳响应质量,鼓励用户在主动语音聊天期间减少背景噪音。
  • 新的特定于音频的安全机制被集成到用于语音聊天的实时 GPT-4o 模型中,如 OpenAI 的官方文档中所述。 此外,我们还对知识产权、版权、越狱和有害内容进行了其他检查,以符合 Microsoft 的 AI 安全实践

Microsoft 如何确保用户的语音聊天录制中不会捕获背景语音?

虽然有一些背景噪音抑制,但语音聊天中仍可能拾取背景语音。 用户可以通过在安静的环境中或附近没有其他扬声器的情况下使用该功能来避免这种情况。 可用性和背景噪音消除功能的进一步改进正在开发中。

在“你好 Copilot”功能处于打开状态时,是否正在记录或分析用户的声音以进行生物识别(如语音打印)?

否 - 此功能在本地运行,并且仅通过“你好 Copilot”激活,不会录制或存储任何对话。 此功能完全符合 Microsoft Copilot 和 Microsoft Copilot 对话助手 中的企业数据保护

Microsoft Copilot 中的语音聊天是否使用我的数据来训练模型?

Microsoft Copilot 中的语音聊天不使用用户数据来训练模型。

用户如何在 Copilot 应用中访问视觉?

只能通过语音聊天访问视觉。 首先,用户必须开始语音聊天,然后共享其屏幕才能使用 Copilot 中的视觉功能。

管理员可以在管理中心禁用视觉功能。

我是否可以相信答案始终准确?

生成式 AI 功能致力于根据可用数据提供准确而信息丰富的答复。 但是,答案可能并不总是准确,因为它们是基于语言数据中的模式和概率生成。 在做出决定或根据答复采取行动之前,请使用自己的判断并仔细检查事实。

虽然这些功能具有缓解措施,以努力避免在结果中共享意外的冒犯性内容,并采取措施防止显示潜在的有害主题,但你仍可能会看到意外的结果。 我们一直在努力改进我们的技术,以根据 我们负责任的 AI 原则主动解决问题。

如果看到或听到不准确、有害或不适当的内容,该怎么办?

Copilot 包含筛选器,用于阻止提示中的冒犯性语言,并避免在敏感上下文中合成建议。 我们将继续努力改进筛选器系统,以更智能地检测和删除冒犯性输出。 如果看到冒犯性输出,请使用拇指向上/拇指向下图标提交反馈,以便我们可以改进安全措施。 Microsoft 非常重视这一挑战,并且致力于解决它。

在哪里可以了解有关 Copilot 隐私的详细信息?

Microsoft Copilot 基于 Microsoft 全面的安全性、合规性和隐私的基础之上。

如果在组织中使用 Microsoft Copilot (工作或学校帐户) ,请参阅 Microsoft Copilot 的数据、隐私和安全性

如何提供反馈?

语音聊天结束后,使用拇指向上和拇指向下按钮提供反馈或改进建议。

使用 Copilot 对话助手的更多方法