Vision i Microsoft 365 Copilot giver dig mulighed for at dele din skrivebordsskærm eller dit mobilkamera og spørge Copilot om, hvad du ser, med svar baseret på både det delte indhold og dine arbejdsdata. Hvis du vil begynde at bruge det, skal du se Introduktion til syn i Microsoft 365 Copilot.
Hvordan fungerer vision?
Vision forvandler det, du deler til oplysninger, Som Copilot kan tale om, og kombinerer det derefter med dine arbejdsdata for at svare dig højt.
- Du deler visuelt input under en stemmesamtale: din skrivebordsskærm (på Windows eller på internettet) eller dit mobilkamera.
- Copilot konverterer det delte skærm- eller kameraindhold til data, som det kan analysere, herunder tekst, billeder, diagrammer og grænseflader på skærmen.
- Copilot begrunder sit svar ved at kombinere det, den ser, med dine Microsoft 365-arbejdsdata, f.eks. dokumenter, mails og tidligere diskussioner.
- Copilot svarer med stemme i realtid, så du kan stille opfølgende spørgsmål i den samme samtale.
Hvad kan vision gøre?
Her er nogle af de mest nyttige ting, du kan gøre med syn:
- Analysér og forklar, hvad du kigger på. Bed Copilot om at fortolke diagrammer, tabeller, slides eller tæt tekst. "Opsummer dette dashboard, og fremhæv eventuelle afvigelser".
- Gør feedback til næste trin. Del en side i et dokument, en mail eller chat, og spørg: "Hvilken feedback har jeg modtaget om dette, og hvad er mine næste trin?"
- Få en statusopdatering for projektet. Del en tracker eller et arbejdselement, og spørg "Giv mig en hurtig status for dette element, den aktuelle ejer og den næste milepæl".
- Få trinvis hjælp i konteksten. Peg telefonens kamera mod en enhedsfejl, og spørg "Hvordan gør jeg rette denne fejl?".
Hvad er synsbegrænsningerne?
- Vision er kun tilgængelig via stemmechats med Copilot lige nu.
- Daglig brug er baseret på tilgængelig kapacitet og tæller med i dit daglige stemmeforbrug. Du får besked i Copilot-appen, når du nærmer dig din tilgængelige brug.
- Vision kan ikke læse videoer eller animerede GIF-filer.
- Skift mellem vinduer for hurtigt, mens du stiller et spørgsmål, kan få Copilot til at svare baseret på det forkerte skærmindhold.
- Vision kan ikke handle eller direkte manipulere elementer på skærmen.
- Vision har ingen langsigtet tilbagekaldelse. Den genbruger ikke skærme eller kamerainput fra tidligere sessioner.
Bemærk
Disse funktioner er ved start. Løbende forbedringer kan løse nogle af disse begrænsninger over tid.
Hvad har vision adgang til?
Under en aktiv session behandler Copilot det skærm- eller kameraindhold, du vælger at dele, sammen med dine Microsoft 365-arbejdsdata for at finde svarene, f.eks. dokumenter, mails, møder og tidligere diskussioner.
- Visuelt input er brugerinitieret og sessionsbundet, så Copilot fungerer kun med indhold, der deles under den aktive session.
- Delt skærm- eller kameraindhold behandles som en række billeder. Lyd- og videodata gemmes midlertidigt, så du kan give feedback til Microsoft og slettes efter 48 timer.
- Tekstafskrifter fra stemmesamtaler gemmes og administreres på samme måde som tekstsamtaler i Microsoft 365 Copilot-appen.
- Vision overholder Microsofts forpligtelse i virksomhedsklasse til datasikkerhed og beskyttelse af personlige oplysninger, og det udleder ikke følsomme personlige attributter som f.eks. race eller følelser.
Du kan få mere at vide under Data, Beskyttelse af personlige oplysninger og Sikkerhed for Microsoft 365 Copilot.
Hvilke typer indhold understøttes?
Vision kan forstå en række indhold på skærmen og i den virkelige verden, herunder:
- Tekst, billeder, diagrammer, tabeller og dashboards.
- Appgrænseflader og arbejdsprocesser med flere vinduer på skrivebordet.
- Fysiske objekter, der vises via dit mobilkamera.
Hvilke sprog understøttes?
Vision er tilgængelig på alle sprog, der understøttes af Microsoft 365 Copilot. Nogle sprog kan være mere tilbøjelige til at udtale eller genkende forskelle. Du kan se hele listen under Understøttede sprog til Microsoft 365 Copilot.
Hvordan blev synssamtaler evalueret? Hvilke målepunkter bruges til at måle ydeevnen?
For at sikre kvalitet får Copilot testspørgsmål, og dens svar evalueres ud fra kriterier som relevans, korrekthed, fuldstændighed, tone og instruktionsoverensstemmelse. For bedre at kunne måle ydeevnen gennemgår vi også brug af funktioner, tommelfinger op-hastighed, engagementshastighed og brugerfeedback. Vi udfører også en lang række sikkerhedsevalueringer, der sikrer, at visionen reagerer på skadelige forespørgsler på en ansvarlig måde.
Hvordan gør jeg give feedback om vision i Copilot?
Du kan give feedback, når du afslutter en stemmechat. Du bør få vist tommelfingre op/ned i chatoversigten, som deles med Microsoft for funktionsforbedringer. Vi bruger ikke denne feedback til at træne de fundamentsmodeller, der bruges af Copilot.