Microsoft Copilot Vision は、Windows PC または Mac を使用したり、Microsoft Edge で Web を閲覧したり、スマートフォンから世界を表示したりするときに、AI と連携させる新しい方法です。 これは、Copilot が見るものをスキャン、分析し、洞察を提供できる第 2 の目のように機能します。 Copilot Vision セッションを開始すると、Copilot は、共有することを選択した画面、アプリ、ページ、またはモバイル カメラ フィードを表示し、Copilot 音声を使用して質問に答え、表示されている内容をガイドできます。
注
Copilot Vision は、Vision セッションからのデータをモデルのトレーニングに使用しません。 セッション データは、ユーザーが送信したフィードバックをサポートするために最大 47 時間一時的に保持され、フィードバックが送信されない場合は自動的に削除されます。 Vision との会話のトランスクリプトはチャット履歴に保存され、後で再確認できます。 会話履歴はトレーニングや個人用設定には使用されず、いつでも削除できます。
Copilot Vision の可用性は、ロールアウト中に異なる場合があります。 Vision は 、サポートされているすべての地域と言語 で利用でき、Windows、Edge、iOS と Android の Copilot モバイル アプリからアクセスできます。 Copilot Vision にアクセスするには、Microsoft 365 Personal、Family、または Premium に加入する必要があります。
Copilot Vision がデータを処理する方法
Copilot Vision は、ビジョン セッションを開始したときにのみアクティブになります。 Microsoft の プライバシーに関する声明に従ってお客様のデータが処理されます。
Vision を使用すると、Copilot の応答がログに記録され、安全でない操作と出力を監視するのに役立つ場合があります。 ユーザー入力、画像、オーディオ、共有ページ コンテンツは、モデルのトレーニングやエクスペリエンスのパーソナライズには使用されません。 セッション データは、ユーザーが送信したフィードバックをサポートするために最大 47 時間一時的に保持され、フィードバックが送信されない場合は自動的に削除されます。
ビジョンは、ユーザーに代わって PC、Web、スマートフォンと直接対話することはありません。 それは質問に答え、あなたを導くために存在し、あなたのために行動を起こすためではありません。 Copilot Vision は、関連情報を見つけやすくするために画面の一部を強調表示する場合がありますが、ユーザーに代わってクリック、テキストの入力、スクロールを行うことはありません。
Windows、macOS、Edge、または Copilot モバイルで初めてビジョンを使用すると、Copilot はプライバシーに関する通知の同意を求めます。
Vision は、Copilot Web アプリとモバイル アプリで Entra ID を使用してサインインした商用ユーザーが利用できます。
Windows で Copilot Vision を使用する
Copilot Vision を使用すると、アクティブなセッション中に選択したブラウザー ウィンドウまたはアプリを Copilot と共有できます。 Copilot は、共有することを選択した内容に関する質問に回答し、ステップ バイ ステップのガイダンスを提供できます。
ビジョン セッションがアクティブな間、Copilot は、共有したアプリまたはブラウザー ウィンドウが目の前で開いていない場合でも、それらのウィンドウに関する質問に回答できます。 ビジョン セッションが終了すると、Copilot は共有したコンテンツの監視をすぐに停止し、共有コンテキストはアクティブなビジョン セッションで使用できなくなります。
Copilot Vision は、Windows 上の任意のアプリで動作します。 ただし、コンテンツに有害または DRM 保護された素材が含まれている場合、Copilot はそれを分析できません。
Windows で Copilot Vision を使用するには:
- Copilot で音声通話を開始します。 ビジョンは既定ではオフになっています。
- Voice セッションにビジョンを追加するには、[ 画面の共有] を選択します。
- Copilot と共有する画面またはアプリを選択します。 Copilot Vision がアクティブな間は、共有画面またはアプリの周囲にアウトラインが表示されます。 一度に最大 2 つのアプリを共有できます。
- マイクと音声が有効になっていることを確認します。 Copilot Vision は、音声入力と出力を使用して、共有しているコンテンツに関する質問に回答します。
- 視覚コントロールと音声コントロールを含むフリー ツール バーが表示されます。 Copilot がお出迎えし、共有コンテンツに関する質問を開始できます。
- 自分自身をミュートするには、マイク アイコン マイク
を選択します。 これにより、Copilot が聞き取らなくなります。 マイク アイコンをもう一度選択して再開します。 - ビジョン セッションを終了するには、フリー ツール バーの [停止 ] を選択します。 セッションが終了すると、Copilot は共有コンテンツの監視をすぐに停止します。
Edge で Copilot Vision を使用する
Copilot Vision は、有害なコンテンツやアダルト コンテンツを含むものを除く、ほとんどのサイトやページで動作します。 Copilot Vision がサポートしていないサイトにアクセスすると、画面下部の Copilot Composer に灰色表示されたアイコンが表示され、Copilot はページのコンテンツについて説明しません。
Edge で Copilot Vision を使用するには:
- 個人用の Microsoft アカウントで Edge にサインインします。
- Edge ツール バーの Copilot アイコンを選択します。
- [音声 (ウェーブ)] ボタンを選択します
![。[ウェーブ] ボタンを選択します](media/waves.png)
。 - Copilot との音声セッションを開始します。
- [ 画面の共有] を選択して、Vision を音声セッションに追加します。
- Copilot に質問するサポートされている Web サイト、ビデオ、または PDF に移動します。 ビジョンを使用しているときは、Copilot サイド ペインのツール バーでビジョン セッションがアクティブであることがわかります。 視覚は、セッションを終了する準備ができるまで、ページ間で参照できます。
- 表示しているページまたはコンテンツについて Copilot に質問します。
- セッションを停止するには、Copilot ウィンドウの下部にあるツール バーで X を選択するか、Copilot のサイド ペインを閉じるか、Edge を終了します。
モバイルで Copilot Vision を使用する
注
Mobile Vision 機能は間もなくロールアウトされます。 Mobile Vision と画面共有は iOS と Android デバイスで段階的に有効になっているため、展開中はユーザーによって可用性が異なる場合があります。
iOS デバイスと Android デバイスの両方の Copilot モバイル アプリで Copilot Vision にアクセスできます。 Copilot Vision は、モバイル デバイス、カメラ、または画面から見えるものに基づいて質問に回答します。
モバイルで Copilot Vision を使用するには:
- Copilot モバイル アプリで、Copilot との音声セッションを開始し、[ 画面の共有] を選択します。 これにより、モバイル デバイスのカメラが起動します。
- この機能を使用するには、デバイスのカメラにアクセスするアクセス許可を Copilot アプリに付与する必要があります。
- Copilot に話しかけて、カメラや画面の透けたものについて質問してください。 Copilot Vision は、ビジョン セッションを終了するまでオンのままになります。
- Copilot Vision セッションを終了するには、 X を選択します。