Med vision i Microsoft 365 Copilot kan du dele skrivebordsskjermen eller mobilkameraet og spørre Copilot om hva du ser, med svar som er forankret i både det delte innholdet og arbeidsdataene dine. Hvis du vil begynne å bruke den, kan du se Komme i gang med visjonen i Microsoft 365 Copilot.
Hvordan fungerer visjonen?
Visjon gjør det du deler til informasjon Copilot kan resonnere over, og kombinerer det deretter med arbeidsdataene dine for å svare deg høyt.
- Du deler visuelle inndata under en talesamtale: skrivebordsskjermen (på Windows eller på nettet) eller mobilkameraet.
- Copilot konverterer det delte skjerm- eller kamerainnholdet til data som kan analyseres, inkludert tekst, bilder, diagrammer og grensesnitt på skjermen.
- Copilot begrunner svaret ved å kombinere det de ser med arbeidsdataene for Microsoft 365, for eksempel dokumenter, e-postmeldinger og tidligere diskusjoner.
- Copilot svarer med stemmen i sanntid, slik at du kan stille oppfølgingsspørsmål i samme samtale.
Hva kan visjonen gjøre?
Her er noen av de mest nyttige tingene du kan gjøre med syn:
- Analyser og forklar hva du ser på. Be Copilot om å tolke diagrammer, tabeller, lysbilder eller tett tekst. Eksempel: «Oppsummer dette instrumentbordet, og uthev eventuelle avvik».
- Gjør tilbakemelding om til neste trinn. Del en side i et dokument, en e-post eller chat, og spør «Hvilken tilbakemelding fikk jeg om dette, og hva er mine neste trinn?»
- Få en oppdatering av prosjektstatus. Del en sporings- eller arbeidselement, og spør «Gi meg en rask status for dette elementet, gjeldende eier og neste milepæl».
- Få hjelp i kontekst, trinnvis hjelp. Pek telefonkameraet mot en enhetsfeil, og spør «Hvordan løse denne feilen?»
Hva er visjonens begrensninger?
- Visjon er bare tilgjengelig via talechatter med Copilot akkurat nå.
- Daglig bruk er basert på tilgjengelig kapasitet og teller mot din daglige talebruk. Du blir varslet i Copilot-appen når du nærmer deg din tilgjengelige bruk.
- Vision kan ikke lese videoer eller animerte GIF-er.
- Hvis du bytter mellom vinduer for fort mens du stiller et spørsmål, kan det føre til at Copilot svarer basert på feil skjerminnhold.
- Syn kan ikke utføre handlinger eller manipulere elementer direkte på skjermen.
- Visjon har ingen langsiktig tilbakekalling. Den bruker ikke skjermer eller kamerainndata fra tidligere økter.
Obs!
Dette er funksjonene ved oppstart. Kontinuerlige forbedringer kan løse noen av disse begrensningene over tid.
Hva har visjonen tilgang til?
Under en aktiv økt behandler Copilot skjermen eller kamerainnholdet du velger å dele, sammen med arbeidsdataene fra Microsoft 365 for å lage grunnlag for svarene, for eksempel dokumenter, e-postmeldinger, møter og tidligere diskusjoner.
- Visuelle inndata er brukerinitiert og øktbundet, så Copilot fungerer bare med innhold som deles under den aktive økten.
- Delt skjerm- eller kamerainnhold behandles som en serie med bilder. Lyd- og videodata lagres midlertidig slik at du kan gi tilbakemelding til Microsoft og slettes etter 48 timer.
- Tekstavskrifter fra talesamtaler lagres og administreres på samme måte som tekstsamtaler i Microsoft 365 Copilot-appen.
- Vision overholder Microsofts forpliktelser på foretaksnivå for datasikkerhet og personvern, og den utleder ikke sensitive personlige attributter som rase eller følelser.
Hvis du vil ha mer informasjon, kan du se Data, Personvern og Sikkerhet for Microsoft 365 Copilot.
Hvilke typer innhold støttes?
Visjon kan forstå en rekke innhold på skjermen og den virkelige verden, inkludert:
- Tekst, bilder, diagrammer, tabeller og instrumentbord.
- Appgrensesnitt og arbeidsflyter med flere vinduer på skrivebordet.
- Fysiske objekter vist via mobilkameraet.
Hvilke språk støttes?
Visjon er tilgjengelig på alle språk som støttes av Microsoft 365 Copilot. Noen språk kan være mer utsatt for uttale eller gjenkjenningsforskjeller. Hvis du vil ha en fullstendig liste, kan du se Støttede språk for Microsoft 365 Copilot.
Hvordan ble visjonssamtaler evaluert? Hvilke måledata brukes til å måle ytelse?
For å sikre kvalitet får Copilot testspørsmål, og svarene evalueres basert på kriterier som relevans, korrekthet, fullstendighet, tone og instruksjonssammenheng. For bedre å måle ytelsen, ser vi også gjennom funksjonsbruk, tommel opp-hastighet, forhandlingsrate og tilbakemeldinger fra brukerne. Vi utfører også en rekke sikkerhetsevalueringer som sikrer at visjonen responderer på en ansvarlig måte for skadelige spørringer.
Hvordan gi tilbakemelding om visjon i Copilot?
Du kan gi tilbakemelding når du avslutter en talechat. Du skal kunne se en tommel opp/ned i chatteloggen som deles med Microsoft for funksjonsforbedringer. Vi bruker ikke denne tilbakemeldingen til å lære opp grunnmodellene som brukes av Copilot.