Използване на Поглед на Copilot с Microsoft Copilot

Microsoft Поглед на Copilot е нов начин ИИ да работи с вас, докато използвате вашия компютър или Mac с Windows, сърфирате в интернет в Microsoft Edge или виждате света от телефона си. Той действа като втори чифт очи, които могат да сканират, анализират и предлагат прозрения въз основа на това, което Copilot вижда. Когато стартирате сесия на Поглед на Copilot, Copilot може да преглежда екрана, приложението, страницата или информационния канал от мобилна камера, които сте избрали да споделите, след което да използва Глас на Copilot, за да отговаря на въпроси и да ви напътства през това, което виждате.

Забележка

"Copilot визуално търсене" не използва данни от вашата сесия за визуално търсене, за да обучи нашите модели. Данните за сесията могат да бъдат временно запазени за период до 47 часа, за да поддържат обратна връзка, подадена от потребителя, и след това се изтриват автоматично, ако не бъде подадена обратна връзка. Запис на разговора ви с Визуално търсене се записва в хронологията на чата, така че можете да го прегледате отново по-късно. Хронологията на вашите разговори не се използва за обучение или персонализиране и можете да я изтриете по всяко време.

Наличността на Copilot Визуално търсене може да варира по време на внедряването. Приложението Vision е налично във всички поддържани региони и езици и е достъпно от Windows, Edge и мобилното приложение Copilot за iOS и Android. Трябва да се абонирате за Microsoft 365 Personal, Family или Premium, за да получите достъп до Поглед на Copilot.

Как Поглед на Copilot обработва вашите данни

"Copilot визуално търсене" е активирано само когато стартирате сесия "Визуално търсене". Тя обработва вашите данни в съответствие с декларацията за поверителност на Microsoft.

Когато използвате Визуално търсене, отговорите на Copilot може да бъдат регистрирани, за да се помогне при наблюдението на опасните взаимодействия и резултати. Входни данни от потребителя, изображения, аудио и споделено съдържание на страници не се използват за обучение на модели или персонализиране на вашето изживяване. Данните за сесията могат да бъдат временно запазени за период до 47 часа, за да поддържат обратна връзка, подадена от потребителя, и след това се изтриват автоматично, ако не бъде подадена обратна връзка.

Зрението не взаимодейства директно с вашия компютър, уеб или телефона ви от ваше име. Той е там, за да отговаря на въпроси и да ви напътства, а не да предприема действия вместо вас. Визуалното търсене с Copilot може да осветява части от екрана, за да ви помогне да намерите подходяща информация, но не щраква, въвежда текст или превърта от ваше име.

Първият път, когато използвате Vision в Windows, macOS, Edge или Copilot Mobile, Copilot ще ви помоли да потвърдите съобщението за поверителност.

Vision е налична за търговски потребители, влезли със своя Entra ID в уеб и мобилните приложения на Copilot.

Използване на Copilot визуално търсене в Windows

"Copilot визуално търсене" ви позволява да споделяте избрани прозорци на браузър или приложения с Copilot по време на активна сесия. Copilot може да отговаря на въпроси за това, което сте избрали да споделите, и да предоставя указания стъпка по стъпка.

Докато сесията за визуално търсене е активна, Copilot може да отговаря на въпроси за приложението или прозорците на браузъра, които сте споделили, дори ако те вече не са отворени пред вас. Когато сесията за визуално търсене приключи, Copilot незабавно спира да наблюдава съдържанието, което сте споделили, и споделеният контекст вече не е наличен за активната сесия на визуално търсене.

Copilot Визуално търсене работи с всяко приложение в Windows. Ако обаче съдържанието включва вредни или защитени с DRM материали, Copilot не може да го анализира.

За да използвате Copilot Визуално търсене в Windows:

  1. Стартирайте гласово повикване в Copilot. Зрението е изключено по подразбиране.
  2. За да добавите визия към гласовата сесия, изберете Споделяне на екрана.
  3. Изберете екрана или приложението, което искате да споделите с Copilot. Докато визуалното търсене с Copilot е активно, ще видите контур около споделения екран или приложение. Можете да споделяте до две приложения едновременно.
  4. Уверете се, че микрофонът и аудиото ви са разрешени. Copilot Визуално търсене използва гласово въвеждане и изход, за да отговаря на въпроси относно съдържанието, което споделяте.
  5. Появява се плаваща лента с инструменти с контроли за зрение и глас. Copilot ще ви поздрави и можете да започнете да задавате въпроси относно споделеното съдържание.
  6. За да изключите звука си, изберете иконата на микрофона Икона на микрофон . Това спира Copilot да слуша. Изберете иконата на микрофона отново, за да възобновите.
  7. За да завършите сесията с визуално търсене, изберете "Стоп " в плаващата лента с инструменти. Когато сесията приключи, Copilot незабавно спира да наблюдава споделеното съдържание.

Използване на Copilot визуално търсене в Edge

Поглед на Copilot работи с повечето сайтове и страници, с изключение на тези, които съдържат опасно съдържание или съдържание за възрастни. Когато посетите сайт, който Copilot визуално търсене не поддържа, съставителят на Copilot в долната част на екрана ще покаже сива икона и Copilot няма да обсъжда съдържанието на страницата.

За да използвате Поглед на Copilot в Edge:

  1. Влезте в Edge с вашия личен акаунт в Microsoft.
  2. Изберете иконата на Copilot в лентата с инструменти на Edge.
  3. Изберете бутона "Глас (вълни) button .
  4. Стартирайте гласова сесия с Copilot.
  5. Изберете "Споделяне на екрана ", за да добавите визия към гласовата сесия.
  6. Отидете на всеки поддържан уеб сайт, видео или PDF файл, за който искате да попитате Copilot. Когато използвате Визуално търсене, лента с инструменти в страничния прозорец на Copilot ви уведомява, че сесията ви с визуално търсене е активна. Зрението остава с вас, докато преминавате от страница на страница, докато не сте готови да прекратите сесията.
  7. Задайте въпроси на Copilot относно страницата или съдържанието, което преглеждате.
  8. За да спрете сесията, изберете X в лентата с инструменти в долната част на прозореца на Copilot, затворете страничния прозорец на Copilot или излезте от Edge.

Използване на Copilot визуално търсене на мобилни устройства

Забележка

Функциите на "Мобилно визуално търсене" се пускат скоро. Мобилното зрение и споделянето на екрана постепенно се разрешават на устройства с iOS и Android, така че наличността може да се различава според потребителя по време на внедряването.

Можете да получите достъп до Поглед на Copilot в мобилното приложение Copilot както на устройства с iOS, така и на устройства с Android. Поглед на Copilot отговаря на въпроси въз основа на това, което вижда през камерата или екрана на вашето мобилно устройство.

За да използвате Поглед на Copilot на мобилно устройство:

  1. В мобилното приложение Copilot започнете гласова сесия с Copilot, след което изберете "Споделяне на екрана". Това ще стартира камерата на мобилното ви устройство.
    • Трябва да дадете разрешение на приложението Copilot за достъп до камерата на вашето устройство, за да използвате тази функция.
  2. Говорете с Copilot и задавайте въпроси за това, което виждате през камерата или на екрана. "Copilot визуално търсене" остава включено, докато не прекратите сесията с визуално търсене.
  3. За да завършите сесията на Поглед на Copilot, изберете X.