Vanliga frågor och svar om ansvarsfull AI för Copilot i Viva Pulse

Vad är Microsoft 365 Copilot i Viva Pulse?

Microsoft 365 Copilot i Viva Pulse använder stor språkmodellteknik (LLM) för att generera en sammanfattning av en Viva Pulse-rapport med hjälp av rapportinformation som medelvärdespoäng, val av flervalsalternativ och öppna textsvar. Sammanfattningen tas med i e-postmeddelandet och Teams-meddelanden när rapporten genereras så att Pulse-författaren snabbt kan förstå sina resultat på en hög nivå. Författare kan dela sammanfattningen med sina gruppmedlemmar och visa bekräftelse på svar och transparens.

Hur utvärderas prestandan för Copilot i Viva Pulse?

Prestanda för Copilot i Viva Pulse utvärderas med hjälp av följande nyckeltal:

• Precision och Tillbakablick: Dessa mått är avgörande för att utvärdera kvaliteten på en sammanfattning som genereras av Copilot i Viva Pulse. Precisionen anger hur många av de genererade sammanfattningarna som är relevanta, medan återkallelsen bestämmer hur många av de relevanta sammanfattningarna som har hämtats.

• Användarnöjdhet: För att mäta användarnöjdhet samlas feedback från användare in för att bedöma hur nöjda användarna är med de genererade sammanfattningarna.

• Generaliseringsbarhet: För att bedöma hur bra resultaten generaliseras i olika användningsfall testas Copilot i Viva Pulse på en mängd olika data och uppgifter. Det handlar om att utvärdera systemprestanda på en rad scenarier och domäner som inte ingick i de första utbildningsdata.

För att hjälpa till att mäta initiala prestanda inbjöds externa experter och testare att hitta sårbarheter eller fördomar i systemet. Systemet testades noggrant med Microsofts Azure AI-utvärderingsverktyg genom att avsiktligt lägga till potentiella risker och säkerhetshål för att se hur väl de hanteras. Den här processen hjälpte till att identifiera potentiella problem och förbättra systemets robusthet. Utvärderingsprocessen pågår med kontinuerliga uppdateringar och förbättringar baserat på feedback från användare för att säkerställa korrekthet, rättvisa och generalisering av Copilot i Viva Pulse.

Vilka är begränsningarna i Copilot i Viva Pulse? Hur kan användarna minimera effekten av Copilots begränsningar när de använder systemet?

Den underliggande modellen som driver Copilot i Viva Pulse-rapportsammanfattningen tränas med GPT-4o-modellen. En begränsning är att den kanske inte ger en relevant rapportsammanfattning om rapporten innehåller oläsliga eller oläsliga svar. För att minimera det här problemet ser du till att undersökningssvaren är tydligt skrivna och begripliga.

Vilka driftfaktorer och inställningar möjliggör effektiv och ansvarsfull användning av Copilot i Viva Pulse?

Copilot i Pulse är utformat med ett robust filtersystem som proaktivt blockerar stötande språk och förhindrar generering av förslag i känsliga sammanhang. Det förbättras kontinuerligt för att upptäcka, adressera och ta bort stötande innehåll som genereras av Copilot i Viva Pulse, inklusive partiska, diskriminerande eller missbrukande resultat.

Du uppmanas att rapportera alla stötande förslag du stöter på när du använder Copilot i Viva Pulse. 

Mer information:

Copilot i Viva 

Visa och dela dina feedbackresultat för Pulse

Rapportsammanfattning med Copilot i Viva Pulse

Detaljerade åtkomstkontroller för Viva Pulse (för administratörer)