Microsoft Copilot Vision är ett nytt sätt att få AI att fungera med dig när du använder din Windows-dator, navigera på webben i Microsoft Edge eller se världen från din telefon. Det är som en andra uppsättning ögon som omedelbart kan skanna, analysera och ge insikter baserat på vad Copilot ser. När du aktiverar Copilot Vision kan Copilot visa din skärm- eller mobilkamerafeed och använda Copilot Voice för att svara på frågor och interagera med dig.
Obs!: Copilot-vision samlar inte in, lagrar eller använder data för att utbilda våra modeller. Inga bilder sparas, transkriberas eller loggas. När den Copilot-vision sessionen avslutas tas alla bilder, ljud och kontext bort. Modellsvar lagras för att möjliggöra övervakning av osäkra interaktioner. En transkription av konversationen med Vision lagras i konversationshistoriken, men används inte för utbildning eller anpassning. Du kan när som helst ta bort chatthistoriken.
Copilot-vision är endast tillgängligt i USA (med undantag för Illinois och Texas) och lanseras snart på andra marknader.
Du måste logga in på Copilot för att komma åt Vision i Windows, Edge eller Copilot-mobilappen (Android eller iOS). Prenumeranter på Microsoft 365 Personal, Familj och Premium får utökade användningsgränser för Vision.
Så här hanterar Copilot Vision dina data
Copilot Vision är bara aktiv när du startar en Vision-session. Den hanterar dina data i enlighet med Microsofts sekretesspolicy.
Vid användning av Vision loggas endast Copilot svar för att möjliggöra övervakning av osäkra interaktioner och utdata. Användarinmatningar, bilder och sidinnehåll loggas eller lagras inte. När röstsessionen avslutas tas dessa data bort.
Vision kommunicerar inte direkt med datorn, webben eller telefonen för din räkning – det finns där för att svara på frågor i stället för att vidta åtgärder. Copilot Syn kan markera delar av skärmen för att hjälpa dig att hitta relevant information. Den kommer inte att klicka, skriva text eller rulla för din räkning.
Första gången du använder Vision i Windows, Edge och Copilot Mobile ber Copilot dig att bekräfta ett sekretessmeddelande.
Vision är inte tillgängligt för kommersiella användare som är inloggade på Copilot eller Edge med ett Entra ID-konto.
Använda Copilot Vision i Windows
Med Copilot i Windows kan du låta Vision se webbläsarfönster eller appar som är öppna på skärmen. Copilot Vision kan sedan svara på frågor eller hjälpa dig att göra något steg för steg.
Copilot Vision fungerar med alla appar i Windows. Men om innehållet innehåller skadligt eller DRM-skyddat material kommer Copilot inte att kunna analysera det.
Så här använder du det:
-
Starta en Copilot Vision-session i appen Copilot genom att klicka på glasögonikonen
i kompositören. -
Välj vilken Windows-app du vill dela med Copilot.
Not: Du kan bara välja två appar åt gången. -
Ett flytande verktygsfält med Copilot röst- och synkontroller visas och Copilot spelar upp en ljudhälsning. I det här läget kan du ha röstkonversationer med Copilot och ställa frågor om vad du ser i den delade appen.
-
Du kan stänga av ljudet genom att klicka på mikrofonikonen, vilket inaktiverar mikrofonen och hindrar Copilot från att lyssna. Om du klickar på mikrofonikonen igen slås ljudet av, så att du kan återuppta konversationen.
-
Om du ber Copilot Vision om hjälp med att använda en viss app kan en markeringsmarkör visas
på skärmen för att peka ut något. Vision vidtar inte åtgärder på datorn åt dig, men det kan förklara och visa vad du bör göra härnäst. -
När du är redo att avsluta Copilot Vision-sessionen klickar du på Stoppa i det flytande verktygsfältet.
AnvändaCopilot Vision i Edge
Copilot Vision i Edge är tillgängligt för alla Edge-användare i USA.
Copilot Vision fungerar med de flesta webbplatser, förutom de som innehåller skadligt eller vuxet innehåll. När du besöker en webbplats som Copilot Vision inte stöder kommer Copilot Composer längst ned på skärmen att visa en nedtonad ikon och korsade glasögon, och modellen vägrar att diskutera innehållet på sidan.
Så här använder du det:
-
Logga in på Edge med ditt personliga Microsoft-konto. Lär dig hur du loggar in och skapar flera profiler i Microsoft Edge om du inte har gjort det tidigare.
-
Navigera i Edge till en webbplats, ett video- eller PDF-dokument som du vill ställa frågor om.
-
Tryck på ikonen Copilot
i det övre högra hörnet av Edge för att öppna Copilot i sidofältet i Edge. -
Tryck på röstknappen
för att ställa en fråga. Not: Medan en vision-session pågår ser du ett flytande verktygsfält med en glasögonikon som indikerar att du är i en aktiv Vision-session. Copilot Vision förblir aktiverat medan du bläddrar på olika sidor tills du avslutar Vision-sessionen. -
Copilot Vision tittar på sidan och låter dig sedan ha en naturlig konversation med Copilot om innehållet.
-
Du kan avsluta en Vision-session genom att stänga det flytande Copilot verktygsfältet eller genom att stänga Edge-fönstret.
Använda Copilot Vision på mobila enheter
Copilot Vision har distribuerats till alla Copilot Pro prenumeranter i USA. Du kan komma åt den i Copilot-mobilappen på iOS- och Android-enheter.
Copilot Vision svarar på frågor baserat på vad den ser via din mobila enhetskamera.
Så här använder du det:
-
I mobilappen Copilot trycker du på röstikonen
för att ställa en fråga. -
När du använder röstgränssnittet trycker du på glasögonikonen
för att starta en Copilot Vision-session. Då startas kameran på din mobila enhet. Not: Du kan behöva ge Copilot-appen behörighet att använda enhetens kamera för att kunna använda den här funktionen. -
Prata med Copilot och ställ frågor om vad du ser genom kameran. Copilot Vision är aktiverat tills du avslutar Vision-sessionen.
-
Om du vill avsluta Copilot Vision-sessionen trycker du på X-ikonen .