Microsoft Copilot-vision är ett nytt sätt att låta AI arbeta med dig när du använder din Windows-dator eller Mac, surfar på webben i Microsoft Edge eller visar världen från telefonen. Det fungerar som en andra uppsättning ögon som kan skanna, analysera och ge insikter baserat på vad Copilot ser. När du startar en Copilot-vision-session kan Copilot visa skärmen, appen, sidan eller mobilkameraflödet som du väljer att dela och sedan använda Copilot Voice för att svara på frågor och vägleda dig genom det du ser.
Obs
Copilot-vision använder inte data från din vision-session för att träna våra modeller. Sessionsdata kan tillfälligt behållas i upp till 47 timmar för att stödja feedback från användare och tas automatiskt bort efteråt om ingen feedback har skickats. En transkription av din konversation med Vision sparas i din chatthistorik så att du kan gå tillbaka till den senare. Konversationshistoriken används inte för utbildning eller anpassning och du kan ta bort den när som helst.
Tillgängligheten för Copilot-vision kan variera under distributionen. Vision är tillgängligt i alla regioner och språk som stöds och kan nås från Windows, Edge och Copilot-mobilappen på iOS och Android. Du måste prenumerera på Microsoft 365 Personal, Family eller Premium för att få åtkomst till Copilot-vision.
Hur Copilot-vision hanterar dina data
Copilot-vision är bara aktivt när du startar en Vision-session. Dina uppgifter hanteras i enlighet med Microsofts sekretesspolicy.
När du använder Vision kan Copilot-svar loggas för att övervaka osäkra interaktioner och utdata. Användarindata, bilder, ljud och delat sidinnehåll används inte för att träna modeller eller anpassa din upplevelse. Sessionsdata kan tillfälligt behållas i upp till 47 timmar för att stödja feedback från användare och tas automatiskt bort efteråt om ingen feedback har skickats.
Vision interagerar inte direkt med din dator, webben eller din telefon å dina vägnar. Den finns där för att svara på frågor och vägleda dig, inte för att vidta åtgärder åt dig. Copilot-vision kan markera delar av skärmen för att hjälpa dig att hitta relevant information, men det klickar inte, anger text eller rullar åt dig.
Första gången du använder Vision i Windows, macOS, Edge eller Copilot Mobile ber Copilot dig att bekräfta ett sekretessmeddelande.
Vision är tillgängligt för kommersiella användare som är inloggade med sitt Entra ID i Copilot-webb- och mobilapparna.
Använda Copilot-vision i Windows
Med Copilot-vision kan du dela valda webbläsarfönster eller appar med Copilot under en aktiv session. Copilot kan svara på frågor om vad du väljer att dela och ge stegvisa anvisningar.
När en vision-session är aktiv kan Copilot svara på frågor om appen eller webbläsarfönster som du har delat, även om de inte längre är öppna framför dig. När Vision-sessionen avslutas slutar Copilot omedelbart att observera det innehåll som du har delat och den delade kontexten är inte längre tillgänglig för den aktiva Vision-sessionen.
Copilot-vision fungerar med alla appar i Windows. Men om innehållet innehåller skadligt eller DRM-skyddat material kan Copilot inte analysera det.
Så här använder du Copilot-vision i Windows:
- Starta ett röstsamtal i Copilot. Synen är avstängd som standard.
- Om du vill lägga till Vision i röstsessionen väljer du Dela skärm.
- Välj den skärm eller app som du vill dela med Copilot. När Copilot-vision är aktivt visas en kontur runt den delade skärmen eller appen. Du kan dela upp till två appar åt gången.
- Kontrollera att mikrofonen och ljudet är aktiverade. Copilot-vision använder röstinmatning och utdata för att svara på frågor om innehållet du delar.
- Ett flytande verktygsfält visas med visions- och röstkontroller. Copilot hälsar dig välkommen och du kan börja ställa frågor om det delade innehållet.
- Om du vill stänga av ljudet själv väljer du mikrofonikonen
. Detta hindrar Copilot från att lyssna. Välj mikrofonikonen igen för att fortsätta. - Om du vill avsluta Vision-sessionen väljer du Stoppa i det flytande verktygsfältet. När sessionen är slut slutar Copilot omedelbart att observera det delade innehållet.
Använda Copilot-vision i Edge
Copilot-vision fungerar med de flesta webbplatser och sidor, förutom de som innehåller skadligt eller vuxet innehåll. När du besöker en webbplats som Copilot-vision inte stöder visar Copilot-kompositören längst ned på skärmen en nedtonad ikon och Copilot diskuterar inte innehållet på sidan.
Så här använder du Copilot-vision i Edge:
- Logga in på Edge med ditt personliga Microsoft-konto.
- Välj Copilot-ikonen i verktygsfältet i Edge.
- Välj knappen Röst (vågor)
. - Starta en röstsession med Copilot.
- Välj Dela skärm för att lägga till Vision i röstsessionen.
- Gå till webbplatser, videor eller PDF-filer som stöds som du vill fråga Copilot om. När du använder Vision kan du visa att din Vision-session är aktiv i ett verktygsfält i Copilot-sidofönstret. Visionen följer med dig när du bläddrar från sida till sida tills du är redo att avsluta sessionen.
- Ställ frågor till Copilot om sidan eller innehållet som du visar.
- Om du vill stoppa sessionen väljer du X i verktygsfältet längst ned i Copilot-fönstret, stänger sidofönstret för Copilot eller avslutar Edge.
Använda Copilot-vision på mobilen
Obs
Mobile Vision funktioner lanseras snart. Mobile Vision och skärmdelning aktiveras gradvis på iOS- och Android-enheter, så tillgängligheten kan variera beroende på användare under distributionen.
Du kan komma åt Copilot-vision i Copilot-mobilappen på både iOS- och Android-enheter. Copilot-vision besvarar frågor baserat på vad den ser genom din mobila enhets kamera eller skärm.
Så här använder du Copilot-vision på mobilen:
- I Copilot-mobilappen startar du en röstsession med Copilot och väljer sedan Dela skärm. Detta startar kameran på din mobila enhet.
- Du måste ge Copilot-appen behörighet att komma åt enhetskameran för att kunna använda den här funktionen.
- Prata med Copilot och ställ frågor om vad du ser genom kameran eller på skärmen. Copilot-vision är aktiverat tills du avslutar Vision-sessionen.
- Om du vill avsluta Copilot Vision-sessionen väljer du X.