Использование визуального распознавания в Microsoft 365 Copilot

Поделитесь экраном рабочего стола или мобильной камерой с Copilot и спросите о том, что вы видите. Copilot отвечает в голосовом чате, используя как то, что находится на экране, так и ваши рабочие данные, чтобы помочь вам быстрее понять визуальную информацию и работать с ней.

Примечание

Для использования визуального распознавания требуется лицензия на Microsoft 365 Copilot. Зрение работает во время голосовой беседы, поэтому убедитесь, что микрофон включен.

Предоставление общего доступа к экрану с помощью Copilot на рабочем столе

  1. Войдите в Microsoft 365 Copilot Chat с помощью учетной записи Microsoft 365.
  2. Начните новую голосовую беседу, выбрав Начать новый голосовой чат в окне командной строки Message Copilot или нажав клавишу Copilot или Win+C в Windows.
  3. Выберите Пуск общий доступ к экрану, а затем выберите весь экран или определенное окно.
  4. Спросите Copilot о том, что на экране с помощью вашего голоса.
    1. Например, "Суммировать эту панель мониторинга и выделить что-нибудь необычное".
    2. При использовании классического приложения Copilot или веб-приложения Copilot в Windows отображается сообщение "Общий доступ к вашему экрану ".
    3. Экран общего доступа или сообщение общего доступа (содержимое) и фиолетовый кадр вокруг общего содержимого отображается при использовании быстрого просмотра в классическом приложении Copilot.
  5. Задавайте дополнительные вопросы в той же беседе по мере необходимости.
  6. По завершении выберите Остановить общий доступ .
    1. Когда вы перестаете делиться своим экраном, голосовой чат тоже не останавливается.

Совместное использование камеры с copilot на мобильных устройствах

  1. Откройте мобильное приложение Microsoft 365 Copilot и начните новую голосовую беседу.
  2. Щелкните значок камеры.
  3. Наведите камеру на то, что вы хотите помочь, и спросите Copilot.
    1. Например, "Разделы справки исправить эту ошибку?".
  4. Снова щелкните значок камеры, чтобы прекратить общий доступ.

Совет

Держите содержимое, о котором вы спрашиваете, в представлении и избегайте слишком быстрого переключения окон, чтобы Copilot реагировал на правильное содержимое.

Попробуйте визуальное распознавание в Copilot с подсказками, как

  • "Каковы ключевые тенденции на этой панели мониторинга и как они сравниваются с отчетом, который я рассмотрел в прошлом месяце?".
  • "Посмотрите на этот баннер и отзыв, который я получил. Какие изменения следует внести в первую очередь?".
  • "Я застрял на этом экране. Пройдите следующие шаги, чтобы выполнить эту задачу.

Примечание

Каждая беседа о видении является независимой. Copilot не использует повторно экраны или вход с камеры из предыдущих чатов, и беседы по визуальному распознаванию не могут быть возобновлены.

Другие способы работы с зрением