Copilot in Viva Pulse の責任ある AI についてよく寄せられる質問

Microsoft 365 Copilot in Vivaパルスとは

Microsoft 365 Copilot in Viva Pulse では、大きな言語モデル (LLM) テクノロジを使用して、平均スコア、複数選択オプションの選択、オープン テキスト応答などのレポートの詳細を使用して、Vivaパルス レポートの概要を生成します。 概要は、レポートが生成されたときに電子メールと Teams の通知に含まれるため、Pulse 作成者は結果を高いレベルですばやく理解できます。 作成者は、その概要をチーム メンバーと共有し、応答と透明性の確認を示すことができます。

Copilot in Vivaパルスのパフォーマンスはどのように評価されますか?

Copilot in Vivaパルスのパフォーマンスは、次の主要なメトリックを使用して評価されます。

• 精度とリコール: これらのメトリックは、Copilot in Viva Pulse によって生成されたサマリーの品質を評価するために重要です。 精度は、生成されたサマリーの数が関連性を定量化しますが、取り消しによって取得された関連するサマリーの数が決まります。

• ユーザーの満足度: ユーザーの満足度を測定するために、ユーザーアンケートのフィードバックが収集され、生成された概要に対するユーザーの満足度が評価されます。

• 一般化可能性: さまざまなユース ケースで結果がどの程度一般化されているかを評価するために、Copilot in Viva Pulse はさまざまなデータとタスクのセットでテストされます。 これには、初期トレーニング データに含まれていないさまざまなシナリオとドメインでシステム パフォーマンスを評価する必要があります。

初期パフォーマンスを測定するために、外部の専門家とテスト担当者が、システム内の脆弱性やバイアスを見つけるために招待されました。 システムは、潜在的なリスクとセキュリティの抜け穴を意図的に追加して、Microsoft の Azure AI 評価ツールを使用して慎重にテストされ、それらがどの程度処理されるかを確認しました。 このプロセスは、潜在的な問題を特定し、システムの堅牢性を向上させるのに役立ちました。 評価プロセスは進行中であり、ユーザー フィードバックに基づいて継続的な更新と改善が行われ、Copilot in Viva Pulse の正確性、公平性、および一般化性が確保されます。

Copilot in Vivaパルスの制限事項は何ですか? ユーザーがシステムを使用する際にこれらの制限の影響を最小限に抑えるにはどうすればよいか。

Copilot in Viva Pulse レポートの概要に基づくモデルは、GPT-4o モデルを使用してトレーニングされます。 レポートに読み取り不可能または判読できない応答が含まれている場合、関連するレポートの概要が提供されない可能性があります。 この問題を軽減するには、アンケートの回答が明確に記述され、理解可能であることを確認します。

Copilot in Viva Pulse の効果的かつ責任ある使用を可能にする操作上の要因と設定は何ですか?

Pulse の Copilot は、攻撃的な言語を積極的にブロックし、機密性の高いコンテキストでの提案の生成を防ぐ堅牢なフィルター システムで設計されています。 Copilot in Viva Pulse によって生成された不快なコンテンツ (バイアス、差別的、または虐待的な出力を含む) を検出、対処、削除することが継続的に改善されています。

Copilot in Viva Pulse の使用中に発生した不快な提案を報告することをお勧めします。 

詳細情報:

Copilot in Viva 

Pulse フィードバックの結果を表示して共有する

Copilot in Viva Pulse を使用したレポートの概要

Viva Pulse のきめ細かいアクセス制御 (管理者向け)