Korzystanie z programu Asystent przeglądania Copilot z Microsoft Copilot

Microsoft Asystent przeglądania Copilot to nowy sposób na współpracę ze swoją siecią AI podczas korzystania z komputera PC lub Mac z systemem Windows, nawigowania po Internecie w przeglądarce Microsoft Edge lub oglądania świata z telefonu.  To jak drugi zestaw oczu, które mogą natychmiast skanować, analizować i oferować wnioski na podstawie tego, co widzi Copilot.  Po aktywowaniu copilot Vision, Copilot może wyświetlić ekran lub kamerę mobilną i używać Głos funkcji Copilot do odpowiadania na pytania i interakcji z Tobą. 

Uwaga

Asystent przeglądania Copilot nie przechwytuje, nie przechowuje ani nie używa żadnych danych do szkolenia naszych modeli.  Obrazy nie są zachowywane, transkrybowane ani rejestrowane.  Po zakończeniu sesji Asystent przeglądania Copilot wszystkie obrazy, audio i kontekst zostaną usunięte.  Model odpowiedzi są przechowywane w celu umożliwienia monitorowania niebezpiecznych interakcji.  Transkrypcja konwersacji z programem Vision jest przechowywana w historii konwersacji, ale nie jest używana do szkoleń ani personalizacji.  Historię czatu możesz usunąć w dowolnym momencie.

Asystent przeglądania Copilot jest dostępny we wszystkich obsługiwanych regionach i językach i można uzyskać do nich dostęp z systemu Windows, przeglądarki Edge i aplikacji mobilnej Copilot (iOS i Android).  Aby uzyskać dostęp do aplikacji Vision, musisz zalogować się do copilot.

Subskrybenci Microsoft 365 Personal, rodziny i premium otrzymują rozszerzone limity użytkowania aplikacji Vision.   

Jak copilot Vision obsługuje Twoje dane

Program Asystent przeglądania Copilot jest aktywny tylko wtedy, gdy inicjujesz sesję vision. Obsługuje on twoje dane zgodnie z oświadczeniem o ochronie prywatności firmy Microsoft.   

Podczas korzystania z aplikacji Vision rejestrowane są tylko odpowiedzi Copilot w celu umożliwienia monitorowania niebezpiecznych interakcji i wyjść. Dane wejściowe użytkownika, obrazy i zawartość stron nie są rejestrowane ani przechowywane.  Po zakończeniu sesji głosowej te dane zostaną usunięte.   

Aplikacja Vision nie współpracuje bezpośrednio z komputerem, internetem ani telefonem w Twoim imieniu — służy do odpowiadania na pytania, a nie do podejmowania działań. Funkcja Asystent przeglądania Copilot może wyróżniać fragmenty ekranu, aby ułatwić znajdowanie odpowiednich informacji. Nie będzie klikać, wprowadzać tekstu ani przewijać w Twoim imieniu. 

Gdy używasz aplikacji Vision po raz pierwszy w systemach Windows, MacOS, Edge i Copilot Mobile, Copilot poprosi o potwierdzenie informacji o ochronie prywatności.   

Vision nie jest dostępny dla użytkowników komercyjnych zalogowanych do copilot lub Edge za pomocą konta identyfikatora Entra. 

Korzystanie z programu Asystent przeglądania Copilot w systemie Windows

Program Asystent przeglądania Copilot umożliwia udostępnianie wybranych okien przeglądarki lub aplikacji rozwiązania Copilot podczas aktywnej sesji. Copilot może odpowiedzieć na pytania dotyczące tego, co zdecydujesz się udostępnić, i podać szczegółowe wskazówki.

Gdy sesja Vision jest aktywna, copilot może odpowiadać na pytania dotyczące aplikacji lub okien przeglądarki udostępnionych podczas aktywnej sesji, nawet jeśli nie są już otwarte przed Tobą. Po zakończeniu sesji vision, Copilot natychmiast przestaje obserwować, a cały udostępniony kontekst jest czyszczony.

Asystent przeglądania Copilot współpracuje z dowolną aplikacją w systemie Windows. Jeśli jednak zawartość zawiera szkodliwy lub chroniony DRM materiał, Copilot nie będzie mógł go przeanalizować. 

Oto jak używać tej funkcji:

  • Zainicjuj sesję Asystent przeglądania Copilot w aplikacji Copilot, klikając ikonę okularów Para czarnych okularów ikona w kompozytorze.

  • Wybierz ekran lub aplikację, którą chcesz udostępnić aplikacji Copilot. Gdy program Asystent przeglądania Copilot jest aktywny, wokół udostępnionego ekranu lub aplikacji zostanie wyświetlony świecący pomarańczowy kontur.
     

    Uwaga

    Możesz wybrać tylko dwie aplikacje naraz.

  • Program Vision uruchamia się z domyślnie włączonym tekstem. Stan widzenia i kontrolki są wyświetlane wewnątrz zadokowanego panelu copilot. Możesz tworzyć konwersacje tekstowe z copilot i zadawać pytania dotyczące tego, co widzisz w udostępnionej aplikacji.

  • Jeśli zmienisz przełącznik na Start za pomocą głosu, na przestawnym pasku narzędzi będą wyświetlane kontrolki Vision i Voice. Usłyszysz komunikat Copilot o odtworzeniu powitania audio. Następnie możesz prowadź konwersację głosową z copilotem i zadawać pytania dotyczące tego, co widzisz w udostępnionej aplikacji.

  • Możesz wyciszyć siebie, klikając ikonę mikrofonu, która wyłącza mikrofon i uniemożliwia copilot słuchanie. Kliknij ponownie ikonę mikrofonu, aby wznowić.

  • Jeśli poprosisz aplikację Asystent przeglądania Copilot o pomoc dotyczącą korzystania z określonej aplikacji, na ekranie może zostać wyświetlony kursor wyróżniający kursor wskazujący. Vision nie będzie podejmować działań na komputerze, ale może wyjaśnić i pokazać, co należy zrobić dalej.

  • Gdy wszystko będzie gotowe do zakończenia sesji Asystent przeglądania Copilot, kliknij pozycję Zatrzymaj się na przestawącym pasku narzędzi. Po zakończeniu sesji copilot natychmiast przestaje obserwować.

Korzystanie z wizji copilot w przeglądarce Edge

Program Asystent przeglądania Copilot współpracuje z większością witryn i stron, z wyjątkiem witryn zawierających szkodliwe treści lub treści dla dorosłych.  Gdy odwiedzisz witrynę, która nie jest obsługiwana przez Asystent przeglądania Copilot, Kompozytor Copilot w dolnej części ekranu będzie wyświetlać wyszarzone ikony i skrzyżowane okulary, a model odmówi omówienia zawartości strony. 

Oto jak używać tej funkcji:

  1. Zaloguj się do programu Edge za pomocą osobistego konta Microsoft.

  2. Kliknij ikonę Copilot na pasku narzędzi Edge.

  3. Następnie kliknij przycisk Fale (fale) przycisk Głos .

  4. Gdy copilot Vision jest aktywny, okienko boczne Copilot pojawi się z ikoną okularów Para ikona czarnych okularów i ikona mikrofonu Ikona mikrofonu Teams .

  5. Przejdź do dowolnej obsługiwanej witryny internetowej, klipu wideo lub pliku PDF, o które chcesz poprosić copilot.

    Uwaga

    Podczas trwania sesji Vision zobaczysz pasek narzędzi z ikoną okularów Para czarnych okularów ikona otwarta w okienku bocznym Copilot wskazująca, że jesteś w aktywnej sesji vision. Funkcja Asystent przeglądania Copilot pozostanie włączona podczas przeglądania różnych stron do momentu zakończenia sesji vision. 

  6. Asystent przeglądania Copilot przyjrzy się stronie, a następnie pozwoli Ci na naturalną rozmowę z Copilot na temat zawartości.

  7. Możesz zatrzymać sesję, klikając przycisk X na pasku narzędzi w dolnej części okna copilot, zamykając całe okienko po stronie copilot lub zamykając edge.

Korzystanie z programu Asystent przeglądania Copilot na urządzeniu przenośnym

Dostęp do copilot vision można uzyskać w aplikacji mobilnej Copilot zarówno na urządzeniach z systemem iOS, jak i Android.   

Asystent przeglądania Copilot odpowiada na pytania na podstawie tego, co widzi za pośrednictwem kamery urządzenia przenośnego.

Oto jak używać tej funkcji:

  • W aplikacji mobilnej Copilot naciśnij ikonę okularów Ikona dwóch czarnych okularów , aby rozpocząć sesję Asystent przeglądania Copilot.  Spowoduje to zainicjowanie aparatu urządzenia przenośnego.

    Uwaga: Aby korzystać z tej funkcji, musisz najpierw udzielić aplikacji Copilot uprawnień dostępu do aparatu urządzenia.

  • Porozmawiaj z copilot i zadaj pytania dotyczące tego, co widzisz przez kamerę lub na ekranie. Program Asystent przeglądania Copilot pozostanie włączony do momentu zakończenia sesji Vision.

  • Aby zakończyć sesję Asystent przeglądania Copilot, naciśnij ikonę X .