Megjegyzés
A Home, a Copilot új kiindulópontja, ahol a Chat és a Cowork találkozik, még mindig bevezetés alatt áll, így a Copilot alkalmazásban megjelenő elemek eltérhetnek a jelen cikkben leírtaktól.
A Microsoft Copilot Látás funkciója lehetővé teszi, hogy megossza az asztali képernyőjét vagy a mobilkameráját, és megkérdezze a Copilotot arról, amit lát, a megosztott tartalmakon és a munkahelyi adatokon alapuló válaszokkal. A használat megkezdéséhez lásd: A látás használatának első lépései a Microsoft Copilot szolgáltatásban.
Hogyan működik a látás?
A Látás olyan információvá alakítja, amit Ön megoszt, majd a Copilot képes érvelni, majd egyesíti azokat a munkahelyi adatokkal, hogy hangosan válaszoljon Önnek.
- A hangalapú beszélgetések során megoszthatja a vizuális bemenetet: az asztali képernyőjét (Windows rendszerben vagy a weben) vagy a mobilkameráját.
- A Copilot a megosztott képernyőt vagy a kamera tartalmát elemezhető adatokká alakítja, beleértve a szöveget, képeket, diagramokat és képernyőn megjelenő felületeket.
- A Copilot a válaszát a Microsoft 365 munkahelyi adatokkal, például dokumentumokkal, e-mailekkel és korábbi vitafórumokkal való kombinálásával alapozza meg.
- A Copilot valós időben válaszol hanggal, így ugyanabban a beszélgetésben további kérdéseket tehet fel.
Mire képes a látás?
Íme néhány a látással elvégezhető leghasznosabb műveletek közül:
- Elemezze és magyarázza el, hogy mit lát. Kérje meg a Copilotot, hogy értelmezze a diagramokat, táblázatokat, diákat vagy sűrű szöveget. Például: "Foglald össze ezt az irányítópultot, és jelöld ki az esetleges anomáliákat."
- Alakítsa a visszajelzést következő lépésekké. Osszon meg egy oldalt egy dokumentumban, e-mailben vagy csevegésben, és kérdezze meg: "Milyen visszajelzést kaptam ezzel kapcsolatban, és mik a következő lépések?"
- Frissítés a projekt állapotáról Osszon meg egy nyomon követést vagy munkaelemet, és kérdezze meg: "Adja meg gyorsan az elem állapotát, az aktuális tulajdonost és a következő mérföldkövet."
- Segítség a környezetbe illő, részletes ismertetéshez. Irányítsa a telefon kameráját egy eszközhibára, és kérdezze meg: "Hogyan hárítsam el ezt a hibát?"
Mik a látás korlátai?
- A látás jelenleg csak hangcsevegéseken keresztül érhető el a Copilottal.
- A napi használat a rendelkezésre álló kapacitás alapján történik, és beleszámít a napi hanghasználatba. Az elérhető használathoz közeledve értesítést kap a Copilot alkalmazásban.
- A látás nem tudja olvasni a videókat és az animált GIF-eket.
- Ha kérdés feltevése közben túl gyorsan vált az ablakok között, előfordulhat, hogy a Copilot nem a megfelelő képernyőtartalom alapján válaszol.
- A látástechnológia nem tud lépéseket végrehajtani, és közvetlenül módosítani a képernyőn megjelenő elemeket.
- A látásnak nincs hosszú távú felidézése. Nem használja fel újra a korábbi munkamenetek képernyőit vagy kamerabemeneteit.
Megjegyzés
Ezek a képességek az indításkor. A folyamatos fejlesztések idővel megoldhatják e korlátozások némelyikét.
Mihez fér hozzá a látás?
Az aktív munkamenet során a Copilot feldolgozza a megosztani kívánt képernyő- vagy kameratartalmat, valamint a Microsoft 365 munkahelyi adatait, hogy megalapozza a válaszokat, például dokumentumokat, e-maileket, értekezleteket és korábbi megbeszéléseket.
- A vizuális bevitel felhasználó által kezdeményezett és munkamenethez kötött, így a Copilot csak az aktív munkamenet során megosztott tartalommal működik.
- A megosztott képernyő- vagy kameratartalmat a rendszer képek sorozataként dolgozza fel. A hang- és videoadatokat ideiglenesen tároljuk ahhoz, hogy visszajelzést küldhessen a Microsoftnak, és 48 óra elteltével törlődnek.
- A hangalapú beszélgetések szöveges átiratait a rendszer ugyanúgy tárolja és kezeli, mint a szöveges beszélgetéseket a Microsoft Copilot alkalmazásban.
- A Látás megfelel a Microsoft nagyvállalati szintű adatbiztonságra és adatvédelemre vonatkozó kötelezettségvállalásainak, és nem következteti ki az olyan érzékeny személyes attribútumokat, mint a faj vagy az érzelmek.
További információ: Adatok, adatvédelem és biztonság a Microsoft Copilot esetében
Milyen típusú tartalmak támogatottak?
A Látás számos képernyőn megjelenő és valós tartalmat képes megérteni, beleértve a következőket:
- Szöveg, képek, diagramok, táblák és irányítópultok.
- Asztali alkalmazásfelületek és többablakos munkafolyamatok.
- A mobilkamerán keresztül megtekintett fizikai objektumok.
Mely nyelvek támogatottak?
A Látás a Microsoft Copilot által támogatott összes nyelven elérhető. Egyes nyelvek hajlamosak lehetnek a kiejtést vagy a felismerést érintő eltérésekre. A teljes listát lásd: A Microsoft Copilot támogatott nyelvei.
Hogyan értékelték a látással kapcsolatos beszélgetéseket? Milyen mérőszámokkal értékelik a teljesítményt?
A minőség biztosítása érdekében a Copilot tesztkérdéseket kap, és a válaszokat olyan kritériumok alapján értékelik, mint a relevancia, a helyesség, a teljesség, a hangnem és az utasítások betartása. A teljesítmény jobb mérése érdekében áttekintjük a funkcióhasználatot, a hüvelykujj-emelkedési arányt, az aktivitási arányt és a felhasználói visszajelzéseket is. Biztonsági értékelések széles körét is végezzük, amelyek biztosítják, hogy a látás felelősségteljesen reagáljon a káros kérdésekre.
Hogyan adhatok visszajelzést a látásról a Copilotban?
A beszélgetés befejezése után visszajelzést küldhet. A csevegési előzményekben megjelenik egy felfelé/lefelé mutató hüvelykujj, amelyet a Microsofttal megosztunk a funkciók fejlesztése érdekében. Ezt a visszajelzést nem használjuk a Copilot által használt alapmodellek betanítására.