Microsoft CopilotVision は、Windows PC または Mac を使用したり、Microsoft Edge で Web を移動したり、スマートフォンから世界を表示したりするときに、AI を連携させる新しい方法です。 これは、Copilot が見ている内容に基づいて、すぐにスキャン、分析、分析、分析を行うことができる 2 番目の目のセットのようなものです。 Copilot Vision をアクティブ化すると、Copilot は画面またはモバイル カメラ フィードを表示し、Copilot Voice を使用して質問に回答し、ユーザーと対話できます。
注: Copilot Visionでは、データをキャプチャ、格納、または使用してモデルをトレーニングすることはありません。 イメージは保持、文字起こし、またはログに記録されません。 Copilot Vision セッションが終了すると、すべてのイメージ、オーディオ、コンテキストが削除されます。 安全でない操作の監視を可能にするために、モデル応答が格納されています。 Vision との会話のトランスクリプトは会話履歴に保存されますが、トレーニングやパーソナル化には使用されません。 チャット履歴はいつでも削除できます。
Copilot Visionは、サポートされているすべてのリージョンと言語で使用でき、Windows、Edge、Copilot モバイル アプリ (iOS および Android) からアクセスできます。 Vision にアクセスするには、 Copilot にサインインする必要があります。
Microsoft 365 Personal、Family、Premium のサブスクライバーは、Vision の使用制限を延長します。
Copilot Vision がデータを処理する方法
Copilot Vision は、Vision セッションを開始するときにのみアクティブです。 お客様のデータは 、Microsoft のプライバシーに関する声明に従って処理されます。
Vision を使用する場合、 Copilotの応答のみがログに記録され、安全でない操作と出力の監視が可能になります。 ユーザー入力、画像、ページ コンテンツはログに記録または保存されません。 音声セッションが終了すると、このデータは削除されます。
Vision は、お客様の代わりに PC、Web、または電話と直接やり取りすることはありません。アクションを実行するのではなく、質問に回答する必要があります。 Copilot ビジョンでは、関連する情報を見つけるのに役立つ画面の一部が強調表示される場合があります。 ユーザーの代わりに、クリック、テキストの入力、スクロールは行われません。
Windows、MacOS、Edge、 Copilot Mobile で初めて Vision を使用する場合、 Copilot はプライバシーに関する通知を確認するように求められます。
Vision は、Entra ID アカウントを使用して Copilot または Edge にサインインしている商用ユーザーには使用できません。
Windows での Copilot Vision の使用
Windows で Copilot を使用すると、画面で開いているブラウザー ウィンドウまたはアプリを Vision に表示できます。 Copilot その後、ビジョンは質問に答えたり、ステップ バイ ステップで何かを行うのに役立ちます。
Copilot Vision は、Windows 上の任意のアプリで動作します。 ただし、コンテンツに有害または DRM で保護された素材が含まれている場合、 Copilot はそれを分析できません。
次のようにします。
-
Copilot アプリで Copilot Vision セッションを開始するには、コンポーザーの眼鏡アイコン
をクリックします。 -
Copilotまたは
で共有する Windows アプリを選択する注: 一度に選択できるアプリは 2 つだけです。 -
Copilot 音声コントロールと Vision コントロールを含むフローティング ツールバーが表示され、 Copilot は音声案内応答を再生します。 この時点で、 Copilot との音声会話を行い、共有アプリに表示される内容について質問できます。
-
マイク アイコンをクリックすると、マイクが無効になり、 Copilot が聞き取れなくなります。 マイク アイコンをもう一度クリックするとミュートが解除され、会話を再開できます。
-
特定のアプリの使用方法に関するヘルプを Copilot Vision に依頼すると、画面上に強調表示されたカーソル
が表示され、何かを指し示す場合があります。 ビジョンは、あなたのPC上でアクションを取りません, それは説明し、次に何をすべきかを示すことができます. -
Copilot Vision セッションを終了する準備ができたら、フローティング ツールバーの [停止 ] をクリックします。
Edge でのCopilot Vision の使用
Copilot ビジョンは、有害または成人のコンテンツを含むサイトを除き、ほとんどのサイトで動作します。 Copilot Vision がサポートしていないサイトにアクセスすると、画面の下部にある Copilot Composer に灰色で表示されたアイコンとクロスした眼鏡が表示され、モデルはページの内容の説明を拒否します。
次のようにします。
-
個人用 Microsoft アカウントを使用して Edge にサインインします。 サインインし、Microsoft Edge で複数のプロファイルを作成する方法について説明します (これを行ったことがない場合)。
-
Edge で、質問する Web サイト、ビデオ、または PDF ドキュメントに移動します。
-
Edge の右上隅にある Copilot アイコン
を押して、Edge サイドバーで Copilot を開きます。 -
[音声] ボタン
を押して質問します。 手記: Vision セッションが進行中の間は、アクティブな Vision セッションに参加していることを示す メガネ アイコンが表示されたフローティング ツールバーが表示されます。 Copilot Vision セッションを終了するまで、さまざまなページを閲覧している間、Vision はオンのままです。 -
Copilot ビジョンはページを見てから、コンテンツに関する Copilot と自然な会話をすることができます。
-
Vision セッションを終了するには、フローティング Copilot ツール バーを閉じるか、Edge ウィンドウを閉じます。
モバイルでの Copilot Vision の使用
iOS デバイスと Android デバイスの両方で、 Copilot モバイル アプリのCopilot Visionにアクセスできます。
Copilot Vision は、モバイル デバイス カメラから見るものに基づいて質問に回答します。
次のようにします。
-
Copilot モバイル アプリで、眼鏡アイコン
をタップして、 Copilot Vision セッションを開始します。 これにより、モバイル デバイス カメラが開始されます。 手記:この機能を使用するには、まず、デバイス カメラにアクセスするためのアクセス許可を Copilot アプリに付与する必要があります。 -
Copilot に話し、カメラまたは画面に表示される内容について質問します。 Copilot Vision セッションを終了するまで、Vision はオンのままです。
-
Copilot Vision セッションを終了するには、 X アイコンをタップします。