Вопросы и ответы о голосовых функциях в Microsoft Copilot

Примечание

Голосовые функции, упомянутые в этой статье, выпускаются постепенно и пока могут быть доступны не всем пользователям. Общая доступность для всех пользователей будет выпущена в ближайшее время.

Что такое Начать новый голосовой чат в Microsoft Copilot?

Начиная новый голосовой чат, пользователи могут вести естественный и интерактивный разговор с Copilot, просто говоря. Голосовой чат обеспечивает более быстрый, простой и интуитивно понятный способ работы с Copilot посредством естественного голосового разговора, основанного на работе и веб-данных. Разговаривайте с Copilot как с личным помощником, в любой момент перебивая и перенаправляя, чтобы подготовиться к рабочему дню, создать документы, разобраться в темах и быстро искать информацию в офисе, без компьютеров или в пути. Эта функция использует веб- и корпоративный Graph для повышения точности ответов и помощи в запросах рабочего контекста.

Что я могу попросить Copilot сделать при участии в голосовом чате?

Разговаривайте с Copilot как с личным помощником — в любое время прерывая и перенаправляя, — для мозгового штурма, подготовки к собранию или дню и быстрого поиска информации. Вы можете выполнять поиск в Интернете и своем рабочем контексте из Microsoft Graph, просто разговаривая. Это может помочь объяснить концепции, провести мозговой штурм, совместно творить, переводить и многое другое.

Каковы предполагаемые сценарии использования голосовых чатов?

Работа не ограничивается вашим рабочим столом. Голосовые чаты в Microsoft Copilot позволяют эффективно работать в любом месте — без использования рук на мобильном устройстве или при многозадачности на рабочем столе. Основываясь на ваших рабочих и веб-данных, он поможет вам:

  • Подготовка и управление вашим днем: Получите сводку календаря в приложении Microsoft Copilot, просматривайте папку "Входящие" и создавайте черновики ответов с помощью функции "голосовое наверстывание" в Outlook Mobile, запрашивайте у Copilot сведения о собрании, например предварительно прочитанные материалы и повестки дня, а также ищите и уточняйте информацию в пути. Используйте Copilot в качестве тренера для репетиции контента.
  • Мозговой штурм и создание: Делитесь быстрыми мыслями с Copilot, и он задает уточняющие вопросы, чтобы помочь их структурировать. Продолжайте работу, разговаривая с Copilot с помощью голосовой связи.

Как пользователям начать новый голосовой чат с Copilot?

  • На мобильных устройствах и настольных компьютерах выберите Пять параллельных полос для начала голосового чатаНачните новый голосовой чат рядом со значком микрофона TeamsНачните диктовку в правом нижнем углу поля создания сообщения Copilot .
  • Голосовые чаты в Copilot на рабочем столе Windows также можно активировать с помощью ярлыков Windows. Нажмите клавишу Copilot или, для устройств без клавиши Copilot , сочетание клавиш Win+C , чтобы открыть окно , окно быстрого просмотра , в котором присутствует тот же значок, для начала голосового чата.
  • Скажите "Привет, Copilot", чтобы открыть окно управления быстрым просмотром в приложении Copilot на рабочем столе Windows. После этого пользователи могут начать говорить с Copilot без использования рук, не нажимая на экран или значок. Элементы управления чатом остаются открытыми на рабочем столе и всегда поверх приложений, когда пользователи работают в разных приложениях. Эта функция требует, чтобы пользователи установили приложение Microsoft Copilot на устройстве с Windows и включили функцию "Слушать "Привет, Copilot" в настройках быстрого просмотра в приложении.

Как включить функцию "Привет, Copilot"?

Чтобы включить функцию "Привет, Copilot", пользователь должен включить соответствующий параметр. В приложении Microsoft Copilot для Windows перейдите в раздел ... "Параметры и другое", а затем Быстрый просмотр для включения переключателя управления "Слушать "Привет, Copilot". "Привет, Copilot" отвечает только тогда, когда это явно вызвано.

Функция "Привет, Copilot" доступна на всех платформах?

В настоящее время эта функция доступна только на компьютерах с Windows. Mac скоро появится.

Как пользователи завершают голосовой чат с Copilot?

Чтобы отключить звук или завершить беседу, пользователь должен нажать кнопку Teams Включить микрофон Значок отключения звука или закрытьЗакрыть. На этом Copilot перестает вас слушать.

Если пользователь забудет завершить голосовой чат при использовании мини-панели инструментов быстрого просмотра, как долго Copilot будет продолжать слушать?

После 30 секунд бездействия с элементами управления быстрым просмотром на экране появится уведомление о том, что Copilot автоматически завершит сеанс через 30 секунд. Фоновый шум может привести к тому, что Copilot продолжит слушать даже после того, как вы закончите говорить.

Чем отличается диктовка и голосовой чат?

Диктовка в Microsoft Copilot позволяет вам говорить, чтобы преобразовать свой голос в письменный текст, что идеально подходит для создания контента без использования рук. Голосовой чат, с другой стороны, позволяет вести двустороннее устное общение с Copilot, позволяя задавать вопросы и получать звуковые ответы в режиме реального времени. Диктовка ориентирована на ввод текста, в то время как голосовой чат обеспечивает более интерактивный, прерываемый и динамичный интерфейс.

Где голосовой чат в Microsoft Copilot доступен сегодня?

Голосовой чат в Microsoft Copilot теперь доступен в Интернете, а также в приложении Microsoft 365 на мобильных устройствах (iOS и Android) и компьютерах (Windows и Mac).

Могут ли пользователи без лицензии Microsoft Copilot взаимодействовать с Copilot с помощью голоса?

Голосовые функции в настоящее время недоступны для пользователей без лицензии Microsoft Copilot; однако они будут доступны для этих пользователей в ближайшее время.

Доступна ли голосовая связь для клиентов из государственных организаций с лицензией Microsoft Copilot?

Голосовые функции будут доступны клиентам облака сообщества для государственных организаций (GCC) и GCC High в будущем, но пока мы не можем сообщить о какой-либо дате.

Какие языки поддерживаются для голосовой связи?

Голосовые функции доступны на всех языках, поддерживаемых Microsoft Copilot. Полный список см. в разделе "Поддерживаемые языки для Microsoft Copilot". Некоторые слова могут быть более склонны к языковым ошибкам или ошибкам произношения.

Можно ли произнести слово пробуждения "Привет, Copilot" на других языках, чтобы начать новый голосовой чат?

Нет, голосовая активация выполняется только на фразу "Привет, Copilot" на английском языке. После активации беседы можно будет продолжать на любом из поддерживаемых языков Copilot. Подробные сведения см. в разделе "Поддерживаемые языки для Microsoft Copilot".

Голосовые функции поддерживают все доступные в Microsoft Copilot?

Сегодня не все возможности, поддерживаемые с помощью текста, доступны в голосовом чате, например, создание изображений, создание файлов и упоминания агентов.

Может ли Copilot использовать мои сохраненные воспоминания во время голосовых чатов?

Пока пользователи находятся в Microsoft Copilot голосовом чате, Copilot может отвечать, используя существующие воспоминания, уже сохраненные в People пользователя, с помощью шестеренок компьютера для параметров персонализации CopilotПараметры персонализации. Пользователи пока не могут изменять свои воспоминания из голосовых чатов из соображений конфиденциальности.

Все воспоминания, которые можно использовать для ответов Copilot в голосовом чате, видны и управляются пользователями в их People с помощью машинных шестеренок для параметров персонализации CopilotПараметры персонализации.

Сколько вариантов голоса доступно?

На сегодняшний день поддерживается только один вариант голоса. В будущем станут доступны дополнительные варианты голоса.

Как долго пользователи с лицензией Microsoft Copilot могут пользоваться голосовыми чатами?

Пользователи с лицензией Microsoft Copilot будут иметь приоритетный доступ к голосовой связи в Copilot. Пользователи будут проинформированы в продукте, когда они приближаются к пропускной способности службы. Сведения о доступе к службам Copilot в Standard в сравнении с приоритетным доступом к функциям в Microsoft Copilot Chat.

Должен ли пользователь оставаться в окне приложения Copilot, чтобы продолжить беседу?

Нет, голосовые чаты работают в фоновом режиме, позволяя пользователям перемещаться между приложениями и выполнять несколько задач одновременно.

Могут ли пользователи возобновить предыдущий голосовой чат?

Да, пользователи могут найти свои прошлые чаты, включая голосовые чаты, в разделе "Чаты" в Microsoft Copilot Chat. После выбора предыдущего чата пользователи могут возобновить его, используя текст в поле создания сообщения Copilot .

Могут ли пользователи продолжать общаться в чате, находясь в других приложениях или с заблокированным экраном?

Пользователи могут продолжать голосовой чат в фоновом режиме при переходе в другие приложения или с заблокированным экраном на рабочем столе. Звук из голосовых чатов прерывается, если пользователи воспроизводят звук из другого приложения.

Элементы управления Quick View "Привет, Copilot" автоматически отключаются при блокировке рабочего стола, поэтому голосовая активация не будет работать при заблокированном экране.

Могут ли пользователи общаться в голосовом чате с агентами Copilot?

Голосовые чаты в настоящее время не поддерживаются в агентах Copilot, но скоро появятся.

Включают ли голосовые чаты динамические расшифровки?

Да, динамические расшифровки поддерживаются по умолчанию на компьютере. Их можно отключить для уменьшения отвлекающих факторов с помощью параметра "Скрытые субтитры" в правом верхнем углу приложения. На мобильных устройствах динамические расшифровки по умолчанию отключены, но их можно включить с помощью той же кнопки скрытых субтитров (CC) в мобильных приложениях во время голосового чата.

Почему ответы Copilot иногда отличаются, если они задаются голосовым голосом, а не текстом?

Голосовые и текстовые беседы по своей природе различны. Copilot использует разные модели для этих разных возможностей, чтобы наилучшим образом соответствовать потребностям пользователей. При использовании голоса пользователи могут получать более короткие ответы, но это не повлияет на точность и качество ответов.

Доступен ли голос в Copilot через CarPlay?

Нет, голос в Copilot сейчас недоступен через CarPlay.

Я видел рекламу по телевизору, показывающую возможности Copilot распознавать экран пользователя (зрение), которое также может активироваться голосом. Доступно ли оно и коммерческим клиентам? Как коммерческие пользователи могут получить доступ к этой возможности?

Функции машинного зрения в настоящее время недоступны в Microsoft Copilot для коммерческих клиентов.

Как корпорация Майкрософт сохраняет звук из голосовых чатов пользователей с помощью Copilot?

Текстовые записи голосовых бесед хранятся и обрабатываются так же, как и текстовые беседы в приложении Microsoft Copilot. Звук пользователя или Copilot не сохраняется. Подробнее о хранении данных для Copilot см. в разделе Данные, конфиденциальность и безопасность для Microsoft Copilot.

Если обратная связь включена, аудиозапись беседы временно сохраняется для пользователей, чтобы пользователи могли отправить отзыв в корпорацию Майкрософт. Фоновый шум может быть включен в звук пользователей. Через 48 часов эти звуковые данные будут удалены. Подробнее см. в статье "Предоставление отзывов о Microsoft Copilot с приложениями Microsoft 365".

Могут ли администраторы отключить голосовой чат с помощью Copilot или голосовую активацию "Привет, Copilot" на уровне клиента или группы?

Для администраторов нет переключателя для конкретных функций, позволяющего отключить голосовые функции в Copilot или голосовой активации "Привет, Copilot".

Как оценивались голосовые чаты? Какие показатели используются для оценки эффективности?

Эта функция измеряет использование, вовлеченность и уровень отказов в голосовых чатах. Качество ответов измеряется в автономном режиме путем тестирования аудио- и текстовых выходов модели на соответствие критериям релевантности, поиска и галлюцинаций для разных языков, сред и акцентов.

Дополнительные сведения см. в карточке приложения: Microsoft Copilot.

Какие эксплуатационные факторы и настройки позволяют эффективно и ответственно использовать голосовой чат?

  • Пользователи могут говорить в голосовых чатах естественно и прерывать звуковые ответы, просто произнося фразу. Copilot перестает говорить и слушает пользователя, когда его прерывают, и предоставляет новые ответы на основе нового голосового ввода.
  • Для обеспечения наилучшего качества ответов пользователям рекомендуется уменьшить фоновый шум во время активных голосовых чатов.
  • Новые механизмы безопасности, специфичные для звука, интегрированы в модель GPT-4o в режиме реального времени, используемую для голосового чата, как указано в официальной документации OpenAI. Существуют также дополнительные проверки интеллектуальной собственности, авторских прав, джейлбрейка и вредоносного содержимого в соответствии с практиками безопасности ИИ Майкрософт.

Как корпорация Майкрософт гарантирует, что фоновые голоса не будут записываться в записи голосового чата пользователя?

Несмотря на некоторое подавление фонового шума, фоновая речь все же может улавливаться в голосовом чате. Этого можно избежать, используя эту функцию в тихой обстановке или без других динамиков поблизости. Находятся в разработке дальнейшие улучшения удобства использования и подавления фонового шума.

Записывается или анализируется голос пользователя для биометрической идентификации, например для печати голоса, при включенной функции "Привет, Copilot"?

Нет. Эта функция работает локально и активируется только с помощью функции "Привет, Copilot" без записи или сохранения беседы. Эта функция полностью совместима с защитой корпоративных данных в Microsoft Copilot и Microsoft Copilot Chat.

Использует ли голосовой чат в Microsoft Copilot мои данные для обучения модели?

Голосовой чат в Microsoft Copilot не использует данные пользователя для обучения модели.

Как пользователь получает доступ к Vision в приложении Copilot?

Vision доступен только через голосовой чат. Сначала пользователь должен начать голосовой чат, а затем поделиться экраном, чтобы использовать возможности зрения в Copilot.

Администраторы могут отключить возможности Vision в Центре администрирования.

Могу ли я быть уверен, что ответы всегда точны?

Функции генеративного ИИ направлены на предоставление точных и информативных ответов на основе доступных данных. Однако ответы не всегда могут быть точными, так как они создаются на основе шаблонов и вероятностей в языковых данных. Используйте свое собственное суждение и дважды проверьте факты, прежде чем принимать решения или предпринимать действия на основе ответов.

Эти возможности позволяют избежать публикации непредвиденного оскорбительного содержимого в результатах и предотвращают показ потенциально опасных тем, но все же вы можете получить непредвиденные результаты. Мы постоянно работаем над совершенствованием технологий, чтобы заблаговременно решать проблемы в соответствии с нашими принципами ответственного применения ИИ.

Что делать, если я вижу или слышу неточный, вредный или неуместный контент?

Copilot включает фильтры для блокировки оскорбительных выражений в запросах и предотвращения синтеза предложений в деликатных контекстах. Мы продолжаем работать над улучшением системы фильтров для более интеллектуального обнаружения и удаления неприемлемых результатов работы. Если вы видите оскорбительные материалы, отправьте отзыв, используя значки "Нравится" и "Не нравится", чтобы мы могли улучшить наши меры безопасности. Корпорация Майкрософт очень серьезно относится к этой проблеме, и мы обязуемся ее решать.

Где можно узнать больше о конфиденциальности с Copilot?

Microsoft Copilot создан на основе комплексного подхода Майкрософт к безопасности, соответствию требованиям и конфиденциальности.

Если вы используете Microsoft Copilot в организации (с рабочей или учебной учетной записью), см. раздел "Данные, конфиденциальность и безопасность для Microsoft Copilot".

Как оставить отзыв?

После завершения голосового чата используйте кнопки "Большой палец вверх" и "Большой палец вниз", чтобы оставить отзыв или внести предложения по улучшению.

Другие способы работы с Copilot Chat