Använda Copilot Vision med Microsoft Copilot
Microsoft Copilot Vision är ett nytt sätt att få AI att fungera tillsammans med dig när du använder din Windows PC eller Mac, navigera på webben i Microsoft Edge eller se världen från din telefon. Det är som en andra uppsättning ögon som omedelbart kan skanna, analysera och ge insikter baserat på vad Copilot ser. När du aktiverar Copilot Vision kan Copilot visa din skärm- eller mobilkamerafeed och använda Copilot Voice för att svara på frågor och interagera med dig.
Obs!: Copilot Vision samlar inte in, lagrar eller använder några data för att utbilda våra modeller. Inga bilder sparas, transkriberas eller loggas. När Copilot Vision-sessionen är slut tas alla bilder, ljud och kontext bort. Modellsvar lagras för att möjliggöra övervakning av osäkra interaktioner. En transkription av konversationen med Vision lagras i konversationshistoriken, men används inte för utbildning eller anpassning. Du kan när som helst ta bort chatthistoriken.
Copilot Vision är tillgängligt i alla regioner och språk som stöds och kan nås via Windows, Edge och Copilot-mobilappen (iOS och Android). Du måste logga in på Copilot för att komma åt Vision.
Prenumeranter på Microsoft 365 Personal, Familj och Premium får utökade användningsgränser för Vision.
Så här hanterar Copilot Vision dina data
Copilot Vision är bara aktiv när du startar en Vision-session. Den hanterar dina data i enlighet med Microsofts sekretesspolicy.
Vid användning av Vision loggas endast Copilot svar för att möjliggöra övervakning av osäkra interaktioner och utdata. Användarinmatningar, bilder och sidinnehåll loggas eller lagras inte. När röstsessionen avslutas tas dessa data bort.
Vision kommunicerar inte direkt med datorn, webben eller telefonen för din räkning – det finns där för att svara på frågor i stället för att vidta åtgärder. Copilot Syn kan markera delar av skärmen för att hjälpa dig att hitta relevant information. Den kommer inte att klicka, skriva text eller rulla för din räkning.
Första gången du använder Vision i Windows, MacOS, Edge och Copilot Mobile ber Copilot dig att bekräfta ett sekretessmeddelande.
Vision är inte tillgängligt för kommersiella användare som är inloggade på Copilot eller Edge med ett Entra-ID-konto.
Använda Copilot Vision i Windows
Med Copilot Vision kan du dela valda webbläsarfönster eller appar med Copilot under en aktiv session. Copilot kan svara på frågor om vad du väljer att dela och ge stegvis vägledning.
Medan en Vision-session är aktiv kan Copilot svara på frågor om app- eller webbläsarfönster som du har delat under den aktiva sessionen, även om de inte längre är öppna framför dig. När Vision-sessionen avslutas slutar Copilot omedelbart att observera och all delad kontext rensas.
Copilot Vision fungerar med alla appar i Windows. Men om innehållet innehåller skadligt eller DRM-skyddat material kommer Copilot inte att kunna analysera det.
Så här använder du det:
-
Starta en Copilot Vision-session i appen Copilot genom att klicka på glasögonikonen
i kompositören. -
Välj vilken skärm eller app du vill dela med Copilot. Medan Copilot Vision är aktivt ser du en glödande orange kontur runt den delade skärmen eller appen.Observera: Du kan bara välja två appar åt gången.
-
Vision startar med Start med text aktiverad som standard. Synstatus och kontroller visas i den dockade Copilot-panelen. Du kan ha en textkonversation med Copilot och ställa frågor om vad du ser i den delade appen.
-
Om du ändrar växlingsknappen till Börja med röst visas kontroller för Syn och röst i ett flytande verktygsfält. Du hör Copilot spela upp en ljudhälsning. Du kan sedan ha en röstkonversation med Copilot och ställa frågor om vad du ser i den delade appen.
-
Du kan stänga av ljudet genom att klicka på mikrofonikonen, vilket inaktiverar mikrofonen och hindrar Copilot från att lyssna. Klicka på mikrofonikonen igen för att återuppta.
-
Om du ber Copilot Vision om hjälp med att använda en viss app kan en markeringsmarkör visas
på skärmen för att peka ut något. Vision vidtar inte åtgärder på datorn åt dig, men det kan förklara och visa vad du bör göra härnäst. -
När du är redo att avsluta Copilot Vision-sessionen klickar du på Stoppa i det flytande verktygsfältet. När sessionen är slut slutar Copilot omedelbart att observera.
AnvändaCopilot Vision i Edge
Copilot Vision fungerar med de flesta webbplatser, förutom de som innehåller skadligt eller vuxet innehåll. När du besöker en webbplats som Copilot Vision inte stöder kommer Copilot Composer längst ned på skärmen att visa en nedtonad ikon och korsade glasögon, och modellen vägrar att diskutera innehållet på sidan.
Så här använder du det:
-
Logga in på Edge med ditt personliga Microsoft-konto. Lär dig hur du loggar in och skapar flera profiler i Microsoft Edge om du inte har gjort det tidigare.
-
Navigera i Edge till en webbplats, ett video- eller PDF-dokument som du vill ställa frågor om.
-
Tryck på ikonen Copilot
i det övre högra hörnet av Edge för att öppna Copilot i sidofältet i Edge. -
Tryck på röstknappen
för att ställa en fråga.Observera: Medan en vision-session pågår ser du ett flytande verktygsfält med en glasögonikon som indikerar att du är i en aktiv Vision-session. Copilot Vision förblir aktiverat medan du bläddrar på olika sidor tills du avslutar Vision-sessionen. -
Copilot Vision tittar på sidan och låter dig sedan ha en naturlig konversation med Copilot om innehållet.
-
Du kan avsluta en Vision-session genom att stänga det flytande Copilot verktygsfältet eller genom att stänga Edge-fönstret.
Använda Copilot Vision på mobila enheter
Du kan komma åt Copilot Vision i Copilot-mobilappen på både iOS- och Android-enheter.
Copilot Vision svarar på frågor baserat på vad den ser via din mobila enhetskamera.
Så här använder du det:
-
I Copilot-mobilappen trycker du på glasögonikonen
för att starta en Copilot Vision-session. Då startas kameran på din mobila enhet.Observera: Du måste först ge Copilot-appen behörighet att använda enhetens kamera för att kunna använda den här funktionen. -
Prata med Copilot och ställ frågor om vad du ser via kameran eller på skärmen. Copilot Vision är aktiverat tills du avslutar Vision-sessionen.
-
Om du vill avsluta Copilot Vision-sessionen trycker du på X-ikonen .