Microsoft Copilotでの Copilot Vision の使用

Microsoft Copilot Vision は、Windows PC または Mac を使用したり、Microsoft Edge で Web を移動したり、スマートフォンから世界を表示したりするときに、AI を連携させる新しい方法です。  これは、Copilot が見ている内容に基づいて、すぐにスキャン、分析、分析、分析を行うことができる 2 番目の目のセットのようなものです。  Copilot Vision をアクティブ化すると、Copilot は画面またはモバイル カメラ フィードを表示し、Copilot 音声 を使用して質問に回答し、ユーザーと対話できます。 

Copilot Vision では、データをキャプチャ、保存、または使用してモデルをトレーニングすることはありません。  イメージは保持、文字起こし、またはログに記録されません。  Copilot Vision セッションが終了すると、すべての画像、オーディオ、コンテキストが削除されます。  安全でない操作の監視を可能にするために、モデル応答が格納されています。  Vision との会話のトランスクリプトは会話履歴に保存されますが、トレーニングやパーソナル化には使用されません。  チャット履歴はいつでも削除できます。

Copilot Vision は 、サポートされているすべてのリージョンと言語 で利用でき、Windows、Edge、Copilot モバイル アプリ (iOS および Android) からアクセスできます。  Vision にアクセスするには、Copilot にサインインする必要があります。

Microsoft 365 Personal、Family、Premium のサブスクライバーは、Vision の使用制限を延長します。   

Copilot Vision がデータを処理する方法

Copilot Vision は、Vision セッションを開始するときにのみアクティブです。 お客様のデータは 、Microsoft のプライバシーに関する声明に従って処理されます。   

Vision を使用する場合、安全でない操作と出力の監視を有効にするために、Copilot の応答のみがログに記録されます。 ユーザー入力、画像、ページ コンテンツはログに記録または保存されません。  音声セッションが終了すると、このデータは削除されます。   

Vision は、お客様の代わりに PC、Web、または電話と直接やり取りすることはありません。アクションを実行するのではなく、質問に回答する必要があります。 Copilot Vision では、関連情報を見つけるのに役立つ画面の一部が強調表示される場合があります。 ユーザーの代わりに、クリック、テキストの入力、スクロールは行われません。 

Windows、MacOS、Edge、Copilot Mobile で初めて Vision を使用する場合、Copilot はプライバシーに関する通知を確認するように求められます。   

Entra ID アカウントを使用して Copilot または Edge にサインインしている商用ユーザーは、Vision を使用できません。 

Windows での Copilot Vision の使用

Copilot Vision を使用すると、アクティブなセッション中に選択したブラウザー ウィンドウまたはアプリを Copilot と共有できます。 Copilot は、共有する内容に関する質問に回答し、ステップバイステップのガイダンスを提供できます。

Vision セッションがアクティブな間、Copilot は、アクティブなセッション中に共有したアプリまたはブラウザー ウィンドウに関する質問に、目の前で開かなくなった場合でも回答できます。 Vision セッションが終了すると、Copilot はすぐに監視を停止し、すべての共有コンテキストがクリアされます。

Copilot Vision は、Windows 上の任意のアプリで動作します。 ただし、コンテンツに有害または DRM で保護された素材が含まれている場合、Copilot はそれを分析できません。 

次のようにします。

  • Copilot アプリで Copilot Vision セッションを開始するには、コンポーザーの眼鏡アイコン [黒い眼鏡のペア] アイコン をクリックします。

  • Copilot と共有する画面またはアプリを選択します。 Copilot Vision がアクティブな間は、共有画面またはアプリの周囲にオレンジ色の光る輪郭が表示されます。
     

    一度に選択できるアプリは 2 つだけです。

  • Vision は、既定 で [テキストで開始] が有効になっている状態で起動します。 ビジョンの状態とコントロールは、ドッキングされた Copilot パネル内に表示されます。 Copilot とテキスト会話を行い、共有アプリに表示される内容について質問することができます。

  • トグルを [音声で開始] に変更すると、フローティング ツールバーに Vision コントロールと音声コントロールが表示されます。 Copilot が音声案内応答を再生する音が聞こえます。 その後、Copilot と音声会話を行い、共有アプリに表示される内容について質問できます。

  • マイクを無効にし、Copilot が聞き取りを停止するマイク アイコンをクリックすると、自分をミュートできます。 マイク アイコンをもう一度クリックして再開します。

  • 特定のアプリを使用する方法のヘルプを Copilot Vision に依頼すると、 画面にカーソル が強調表示され、何かを指し示す場合があります。ビジョンは、あなたのPC上でアクションを取りません, それは説明し、次に何をすべきかを示すことができます.

  • Copilot Vision セッションを終了する準備ができたら、フローティング ツールバーの [停止 ] をクリックします。 セッションが終了すると、Copilot はすぐに監視を停止します。

Edge での Copilot Vision の使用

Copilot Vision は、有害または成人のコンテンツを含むサイトやページを除き、ほとんどのサイトとページで動作します。  Copilot Vision がサポートしていないサイトにアクセスすると、画面の下部にある Copilot Composer に灰色で表示されたアイコンとクロスした眼鏡が表示され、モデルはページの内容の議論を拒否します。 

次のようにします。

  1. 個人用 Microsoft アカウントで Edge にサインインします。

  2. [Edge] ツールバーの [Copilot] アイコンをクリックします。

  3. 次に、[音声 (ウェーブ)] ボタン [ ウェーブ] ボタン をクリックします

  4. Copilot Vision がアクティブな場合、Copilot のサイド ウィンドウに眼鏡アイコン [黒い眼鏡アイコンのペア ] とマイク アイコン [Teams マイク アイコン ] が表示されます。

  5. Copilot に質問するサポートされている Web サイト、ビデオ、または PDF に移動します。

    Vision セッションが進行中の間は、アクティブな Vision セッションに参加していることを示すツール バーが表示され、眼鏡 アイコン [黒い眼鏡のペア] アイコン が Copilot 側のウィンドウに開きます。 Copilot Vision は、Vision セッションを終了するまで別のページを参照している間はオンのままです。 

  6. Copilot Vision はページを見てから、コンテンツについて Copilot と自然に会話できるようにします。

  7. セッションを停止するには、Copilot ウィンドウの下部にあるツール バーの [X] をクリックするか、Copilot 側ウィンドウ全体を閉じるか、Edge を終了します。

モバイルでの Copilot Vision の使用

iOS デバイスと Android デバイスの両方の Copilot モバイル アプリで Copilot Vision にアクセスできます。   

Copilot Vision は、モバイル デバイス カメラを介して見るものに基づいて質問に回答します。

次のようにします。

  • Copilot モバイル アプリで、眼鏡アイコン [黒い眼鏡のペア] アイコン をタップして Copilot Vision セッションを開始します。  これにより、モバイル デバイス カメラが開始されます。

    メモ: この機能を使用するには、まずデバイス カメラにアクセスするためのアクセス許可を Copilot アプリに付与する必要があります。

  • Copilot に相談し、カメラまたは画面に表示される内容について質問します。 Copilot Vision は、Vision セッションを終了するまでオンのままです。

  • Copilot Vision セッションを終了するには、 X アイコンをタップします。