Met Vision in Microsoft Copilot kun je je bureaubladscherm of mobiele camera delen en Copilot vragen wat je ziet, met antwoorden gebaseerd op zowel de gedeelde inhoud als je werkgegevens. Zie Aan de slag met vision in Microsoft Copilot om het te gebruiken.
Hoe werkt visie?
Vision zet wat je deelt om in informatie die Copilot kan gebruiken en combineert deze vervolgens met je werkgegevens om je hardop te antwoorden.
- U deelt visuele invoer tijdens een spraakgesprek: uw bureaubladscherm (op Windows of op het web) of uw mobiele camera.
- Copilot zet het gedeelde scherm of de camera-inhoud om in gegevens die kunnen worden geanalyseerd, waaronder tekst, afbeeldingen, grafieken en interfaces op het scherm.
- Copilot baseert zijn antwoord door wat het ziet te combineren met je Microsoft 365-werkgegevens, zoals documenten, e-mailberichten en eerdere discussies.
- Copilot antwoordt met spraak in realtime, zodat je in hetzelfde gesprek vervolgvragen kunt stellen.
Wat kan visie doen?
Hier volgen enkele van de handigste dingen die u kunt doen met gezichtsvermogen:
- Analyseer en leg uit waar u naar kijkt. Vraag Copilot om grafieken, tabellen, dia's of compacte tekst te interpreteren. Bijvoorbeeld: 'Dit dashboard samenvatten en eventuele afwijkingen markeren.'
- Zet feedback om in volgende stappen. Deel een pagina van een document, e-mail of chat en vraag: "Welke feedback heb ik hierover ontvangen en wat zijn mijn volgende stappen?".
- Een update van de projectstatus opvragen. Deel een tracker of werkitem en vraag: 'Geef me een snelle status van dit item, de huidige eigenaar en de volgende mijlpaal.'
- Krijg stapsgewijze hulp in context. Richt de camera van uw telefoon op een apparaatfout en vraag: "Hoe kan ik deze fout oplossen?".
Wat zijn de beperkingen van het gezichtsvermogen?
- Vision is momenteel alleen beschikbaar via voicechats met Copilot.
- Dagelijks gebruik is gebaseerd op beschikbare capaciteit en telt mee voor uw dagelijks spraakgebruik. Je krijgt een melding in de Copilot-app wanneer je je beschikbare gebruik nadert.
- Vision kan geen video's of GIF-animaties lezen.
- Als u te snel schakelt tussen vensters tijdens het stellen van een vraag, kan Copilot reageren op basis van de verkeerde scherminhoud.
- Vision kan geen actie ondernemen of items op het scherm rechtstreeks manipuleren.
- Visie heeft geen langetermijnherinnering. Schermen of camera-invoer uit eerdere sessies worden niet opnieuw gebruikt.
Opmerking
Dit zijn de mogelijkheden bij de lancering. Met voortdurende verbeteringen kunnen sommige van deze beperkingen in de loop van de tijd worden opgelost.
Waar heeft visie toegang toe?
Tijdens een actieve sessie verwerkt Copilot de scherm- of camera-inhoud die je wilt delen, samen met je Microsoft 365-werkgegevens om de antwoorden, zoals documenten, e-mailberichten, vergaderingen en eerdere discussies, te onderbouwen.
- Visuele invoer wordt door de gebruiker geïnitieerd en sessiegebonden, dus Copilot werkt alleen met inhoud die tijdens de actieve sessie wordt gedeeld.
- Gedeelde scherm- of camera-inhoud wordt verwerkt als een reeks afbeeldingen. Audio- en videogegevens worden tijdelijk opgeslagen, zodat u feedback kunt geven aan Microsoft en worden na 48 uur verwijderd.
- Teksttranscripties van gesprekken worden op dezelfde manier opgeslagen en beheerd als tekstgesprekken in de Microsoft Copilot-app.
- Vision houdt zich aan de toezeggingen van Microsoft op het niveau van bedrijfsniveau op het gebied van gegevensbeveiliging en privacy en leidt geen gevoelige persoonlijke kenmerken af, zoals ras of emotie.
Zie Gegevens, privacy en beveiliging voor Microsoft Copilot voor meer informatie.
Welke typen inhoud worden ondersteund?
Vision kan een scala aan inhoud op het scherm en in de echte wereld begrijpen, waaronder:
- Tekst, afbeeldingen, grafieken, tabellen en dashboards.
- App-interfaces en werkstromen voor meerdere vensters op desktops.
- Fysieke objecten die worden bekeken via uw mobiele camera.
Welke talen worden ondersteund?
Vision is beschikbaar in alle talen die worden ondersteund door Microsoft Copilot. Sommige talen zijn gevoeliger voor verschillen in uitspraak of herkenning. Zie Ondersteunde talen voor Microsoft Copilot voor de volledige lijst.
Hoe zijn visiegesprekken geëvalueerd? Welke metrische gegevens worden gebruikt om de prestaties te meten?
Om kwaliteit te garanderen, krijgt Copilot testvragen en worden de antwoorden geëvalueerd op basis van criteria zoals relevantie, juistheid, volledigheid, toon en naleving van instructies. Om de prestaties beter te meten, kijken we ook naar het gebruik van de functie, de duim omhoog, het betrokkenheidspercentage en de feedback van gebruikers. We voeren ook een breed scala aan veiligheidsevaluaties uit die ervoor zorgen dat Vision op een verantwoorde manier reageert op schadelijke vragen.
Hoe kan ik feedback geven over visie in Copilot?
Je kunt feedback geven zodra je een voicechat beëindigt. Je zou een duim omhoog/omlaag moeten zien verschijnen in je chatgeschiedenis die wordt gedeeld met Microsoft voor functieverbeteringen. We gebruiken deze feedback niet om de basismodellen te trainen die door Copilot worden gebruikt.