Vision u rješenju Microsoft Copilot omogućuje vam zajedničko korištenje zaslona radne površine ili kamere mobilnog uređaja i pitajte Copilot o onome što vidite, s odgovorima utemeljenim na zajedničkom sadržaju i vašim poslovnim podacima. Da biste ga počeli koristiti, pročitajte članak Početak rada s vidom u rješenju Microsoft Copilot.
Kako funkcionira vid?
Vision pretvara ono što zajednički koristite u informacije, Copilot može razmišljati, a zatim ih kombinira s poslovnim podacima kako bi vam odgovorio naglas.
- Tijekom govornog razgovora zajednički koristite vizualni unos: zaslon radne površine (u sustavu Windows ili na webu) ili kameru mobilnog uređaja.
- Copilot pretvara zajednički sadržaj zaslona ili kamere u podatke koje može analizirati, uključujući tekst, slike, grafikone i zaslonska sučelja.
- Copilot svoj odgovor temelji kombiniranjem onoga što vidi s vašim radnim podacima okruženja Microsoft 365, kao što su dokumenti, poruke e-pošte i ranije rasprave.
- Copilot odgovara glasom u stvarnom vremenu, tako da možete postavljati dodatna pitanja u istom razgovoru.
Što može vid?
Evo nekih od najkorisnijih stvari koje možete učiniti s vidom:
- Analizirajte i objasnite što gledate. Zamolite Copilot da tumači grafikone, tablice, slajdove ili gusti tekst. Na primjer, "Sažmi ovu nadzornu ploču i istakni sve anomalije".
- Pretvorite povratne informacije u sljedeće korake. Podijelite stranicu dokumenta, poruke e-pošte ili čavrljanja i pitajte "Koje sam povratne informacije dobio o tome i koji su moji daljnji koraci?"
- Dohvaćanje ažuriranja statusa projekta. Podijelite tablicu za praćenje ili radnu stavku i pitajte "Daj mi brzi status ove stavke, trenutnog vlasnika i sljedeću kontrolnu točku".
- Pronađite pomoć korak po korak u kontekstu. Usmjerite kameru telefona prema pogrešci uređaja i pitajte "Kako ispraviti tu pogrešku?"
Koja su ograničenja vida?
- Vision je trenutno dostupan samo putem glasovnih čavrljanja s Copilotom.
- Svakodnevno korištenje temelji se na dostupnom kapacitetu i uračunava se u vašu dnevnu upotrebu govornih usluga. Primit ćete obavijest u aplikaciji Copilot kako se približavate dostupnoj upotrebi.
- Vision ne može čitati videozapise ni animirane GIF-ove.
- Prebrzo prebacivanje između prozora prilikom postavljanja pitanja može uzrokovati da Copilot odgovori na temelju pogrešnog sadržaja zaslona.
- Vid ne može poduzimati radnje niti izravno upravljati stavkama na zaslonu.
- Vizija nema dugoročno prisjećanje. Ne koristi ponovno zaslone ili unos kamere iz prethodnih sesija.
Napomena
To su mogućnosti prilikom pokretanja. Trenutna poboljšanja mogla bi s vremenom ukloniti neka od tih ograničenja.
Čemu ima pristup vid?
Tijekom aktivne sesije Copilot obrađuje zaslon ili sadržaj kamere koji odaberete za zajedničko korištenje, zajedno s vašim radnim podacima okruženja Microsoft 365 kako bi utemeljio svoje odgovore, kao što su dokumenti, poruke e-pošte, sastanci i prethodne rasprave.
- Vizualni unos pokreće korisnik i vezan je za sesiju, tako da Copilot radi samo sa sadržajem koji se zajednički koristi tijekom aktivne sesije.
- Zajednički sadržaj zaslona ili kamere obrađuje se kao niz slika. Audiopodaci i videopodaci privremeno se pohranjuju kako biste Microsoftu mogli poslati povratne informacije i brišu se nakon 48 sati.
- Tekstni transkripti glasovnih razgovora pohranjuju se i njima upravlja na isti način kao i tekstnim razgovorima u aplikaciji Microsoft Copilot.
- Vision je usklađen s Microsoftovom predanošću, a sigurnosti podataka i zaštiti privatnosti na razini poduzeća te ne zaključuje o osjetljivim osobnim atributima kao što su rasa ili emocije.
Dodatne informacije potražite u članku Podaci, zaštita privatnosti i sigurnost za Microsoft Copilot.
Koje su vrste sadržaja podržane?
Vision može razumjeti raspon sadržaja na zaslonu i iz stvarnog svijeta, uključujući:
- tekst, slike, grafikone, tablice i nadzorne ploče.
- Sučelja aplikacija i tijekovi rada s više prozora na radnoj površini
- fizičke objekte koji se vide putem mobilne kamere.
Koji su jezici podržani?
Očitavanje je dostupno na svim jezicima koje podržava Microsoft Copilot. Neki su jezici podložniji razlikama u izgovoru ili prepoznavanju. Za potpuni popis pogledajte podržane jezike za Microsoft Copilot.
Kako su se ocjenjivali razgovori o vidu? Koja se metrika koristi za mjerenje performansi?
Kako bi se osigurala kvaliteta, Copilot dobiva testna pitanja, a njegovi se odgovori vrednuju na temelju kriterija kao što su relevantnost, ispravnost, potpunost, ton i pridržavanje uputa. Da bismo bolje izmjerili performanse, pregledavamo i korištenje značajki, stopu palca prema gore, stopu angažmana i povratne informacije korisnika. Također provodimo širok raspon sigurnosnih procjena kako bismo osigurali da vid odgovorno odgovori na štetne upite.
Kako mogu dati povratne informacije o vidu u Copilotu?
Kada završite glasovno čavrljanje, možete nam poslati povratne informacije. U povijesti čavrljanja koju dijelite s Microsoftom radi poboljšanja značajki trebali biste vidjeti palac gore/dolje. Te povratne informacije ne koristimo za uvježbavanje temeljnih modela koje koristi Copilot.