Viva Pulse의 Copilot을 위한 책임감 있는 AI에 관해 자주 묻는 질문
Viva의 Microsoft 365 Copilot Pulse란?
Viva의 Microsoft 365 Copilot Pulse는 LLM(큰 언어 모델) 기술을 사용하여 평균 점수, 객관식 옵션 선택 및 열린 텍스트 응답과 같은 보고서 세부 정보를 사용하여 Viva Pulse 보고서의 요약을 생성합니다. 요약은 보고서가 생성될 때 이메일 및 Teams 알림에 포함되므로 Pulse 작성자가 높은 수준에서 결과를 빠르게 이해할 수 있습니다. 작성자는 팀 구성원과 요약을 공유하여 응답 및 투명성에 대한 승인을 입증할 수 있습니다.
Viva의 Copilot Pulse의 성능은 어떻게 평가됩니까?
Viva의 Copilot Pulse의 성능은 다음 주요 메트릭을 사용하여 평가됩니다.
정밀도 및 재현율: 이러한 메트릭은 Viva의 Copilot Pulse에서 생성된 요약의 품질을 평가하는 데 매우 중요합니다. 정밀도는 생성된 요약이 관련되는 수를 정량화하는 반면, 회수는 검색된 관련 요약 수를 결정합니다.
사용자 만족도: 사용자 만족도를 측정하기 위해 사용자 설문 조사 피드백이 수집되어 생성된 요약에 대한 사용자의 만족도를 평가합니다.
일반화 가능성: 다양한 사용 사례에서 결과가 얼마나 잘 일반화되는지 평가하기 위해 Viva의 Copilot Pulse는 다양한 데이터 및 작업 집합에서 테스트됩니다. 여기에는 초기 학습 데이터의 일부가 아닌 다양한 시나리오 및 도메인에서 시스템 성능을 평가하는 작업이 포함됩니다.
초기 성능을 측정하기 위해 외부 전문가와 테스터가 시스템에서 취약성 또는 편견을 찾도록 초대되었습니다. 이 시스템은 잠재적인 위험과 보안 허점을 의도적으로 추가하여 Microsoft의 Azure AI 평가 도구를 사용하여 신중하게 테스트하여 시스템을 얼마나 잘 처리하는지 확인했습니다. 이 프로세스는 잠재적인 문제를 식별하고 시스템의 견고성을 개선하는 데 도움이 됩니다. 평가 프로세스는 Viva의 Copilot Pulse의 정확도, 공정성 및 일반화 가능성을 보장하기 위해 사용자 피드백에 따라 지속적으로 업데이트되고 개선되고 있습니다.
Viva의 Copilot Pulse의 제한 사항은 무엇인가요? 사용자가 시스템을 사용할 때 이러한 제한 사항의 영향을 최소화하려면 어떻게 할까요?
Viva의 Copilot Pulse 보고서 요약을 구동하는 기본 모델은 GPT-4o 모델을 사용하여 학습됩니다. 보고서에 읽을 수 없거나 읽을 수 없는 응답이 포함된 경우 관련 보고서 요약을 제공하지 않을 수 있다는 제한 사항이 있습니다. 이 문제를 완화하려면 설문 조사 응답을 명확하게 작성하고 이해할 수 있는지 확인합니다.
Viva의 Copilot Pulse를 효과적이고 책임감 있게 사용할 수 있는 운영 요인 및 설정은 무엇인가요?
Pulse의 Copilot는 공격적인 언어를 사전에 차단하고 중요한 컨텍스트에서 제안 생성을 방지하는 강력한 필터 시스템으로 설계되었습니다. 편견, 차별 또는 학대 출력을 포함하여 Viva의 Copilot Pulse에서 생성한 공격적인 콘텐츠를 검색, 해결 및 제거하는 기능이 지속적으로 향상됩니다.
Viva의 Copilot Pulse를 사용하는 동안 발생하는 불쾌한 제안을 보고하는 것이 좋습니다.
더 알아보세요:
Viva의 Copilot Pulse를 사용한 보고서 요약
Viva Pulse에 대한 세분화된 액세스 제어 (관리자용)