Microsoft Copilot Copilot Vision 사용

Microsoft Copilot Vision은 Windows PC 또는 Mac을 사용하거나, Microsoft Edge에서 웹을 탐색하거나, 휴대폰에서 세상을 볼 때 AI가 사용자와 함께 작동하도록 하는 새로운 방법입니다.  이는 Copilot가 보는 내용에 따라 즉시 검사, 분석 및 인사이트를 제공할 수 있는 두 번째 눈 집합과 같습니다.  Copilot Vision을 활성화하면 Copilot에서 화면 또는 모바일 카메라 피드를 보고 Copilot Voice를 사용하여 질문에 답변하고 사용자와 상호 작용할 수 있습니다. 

참고

Copilot Vision은 데이터를 캡처, 저장 또는 사용하여 모델을 학습시키지 않습니다.  이미지가 보존, 전사 또는 기록되지 않습니다.  Copilot Vision 세션이 종료되면 모든 이미지, 오디오 및 컨텍스트가 삭제됩니다.  안전하지 않은 상호 작용을 모니터링할 수 있도록 모델 응답이 저장되고 있습니다.  Vision과의 대화 녹취록은 대화 기록에 저장되지만 학습 또는 개인 설정에는 사용되지 않습니다.  언제든지 채팅 기록을 삭제할 수 있습니다.

Copilot Vision은 지원되는 모든 지역 및 언어 에서 사용할 수 있으며 Windows, Edge 및 Copilot 모바일 앱(iOS 및 Android)에서 액세스할 수 있습니다.  Vision에 액세스하려면 Copilot에 로그인해야 합니다.

Microsoft 365 Personal, Family 및 Premium 구독자는 Vision의 확장 사용 제한을 받습니다.   

Copilot Vision이 데이터를 처리하는 방법

Copilot Vision은 비전 세션을 시작할 때만 활성화됩니다. Microsoft의 개인정보처리방침에 따라 데이터를 처리합니다.   

Vision을 사용하는 경우 안전하지 않은 상호 작용 및 출력을 모니터링할 수 있도록 Copilot의 응답만 기록됩니다. 사용자 입력, 이미지 및 페이지 콘텐츠는 기록되거나 저장되지 않습니다.  음성 세션이 종료되면 이 데이터가 삭제됩니다.   

Vision은 사용자 대신 PC, 웹 또는 휴대폰과 직접 소통하지 않습니다. 작업을 수행하지 않고 질문에 답변할 수 있습니다. Copilot Vision은 관련 정보를 찾는 데 도움이 되도록 화면의 일부를 강조 표시할 수 있습니다. 사용자를 대신하여 클릭하거나, 텍스트를 입력하거나, 스크롤하지 않습니다. 

Windows, MacOS, Edge 및 Copilot Mobile에서 Vision을 처음 사용할 때 Copilot는 개인 정보 통지를 승인하도록 요청합니다.   

비전은 Entra ID 계정으로 Copilot 또는 Edge에 로그인한 상용 사용자가 사용할 수 없습니다. 

Windows에서 Copilot Vision 사용

Copilot Vision을 사용하면 활성 세션 중에 선택한 브라우저 창 또는 앱을 Copilot와 공유할 수 있습니다. Copilot는 공유하도록 선택한 항목에 대한 질문에 답변하고 단계별 지침을 제공할 수 있습니다.

Vision 세션이 활성 상태인 동안 Copilot는 활성 세션 중에 공유한 앱 또는 브라우저 창에 대한 질문에 답변할 수 있습니다. Vision 세션이 종료되면 Copilot는 즉시 관찰을 중지하고 모든 공유 컨텍스트가 지워집니다.

Copilot Vision은 Windows의 모든 앱에서 작동합니다. 그러나 콘텐츠에 유해하거나 DRM으로 보호되는 물질이 포함된 경우 Copilot는 이를 분석할 수 없습니다. 

사용 방법은 다음과 같습니다.

  • 작성기에서 안경 아이콘 A 쌍의 검은 색 안경 아이콘 을 클릭하여 Copilot 앱에서 Copilot Vision 세션을 시작합니다.

  • Copilot와 공유할 화면 또는 앱을 선택합니다. Copilot Vision이 활성화되어 있는 동안 공유 화면 또는 앱 주위에 빛나는 주황색 윤곽선이 표시됩니다.
     

    참고

    한 번에 두 개의 앱만 선택할 수 있습니다.

  • Vision은 기본적으로 텍스트로 시작을 사용하도록 설정하여 시작합니다. 비전 상태 및 컨트롤은 도킹된 코필로트 패널 내에 나타납니다. Copilot와 텍스트 대화를 나누고 공유 앱에 표시되는 내용에 대해 질문할 수 있습니다.

  • 토글을 음성으로 시작으로 변경하면 부동 도구 모음에 Vision 및 음성 컨트롤이 표시됩니다. 코필로트가 오디오 인사말을 재생하는 것을 들을 수 있습니다. 그런 다음 Copilot와 음성 대화를 나누고 공유 앱에 표시되는 내용에 대해 질문할 수 있습니다.

  • 마이크 아이콘을 클릭하여 음소거할 수 있습니다. 이 아이콘은 마이크를 사용하지 않도록 설정하고 Copilot의 수신을 중지합니다. 다시 시작하려면 마이크 아이콘을 다시 클릭합니다.

  • Copilot Vision에게 특정 앱을 사용하는 방법에 대한 도움을 요청하는 경우 화면에 강조 표시된 커서 커서 가 표시되어 무언가를 지적할 수 있습니다. Vision은 PC에서 작업을 수행하지 않지만 다음에 수행해야 하는 작업을 설명하고 표시할 수 있습니다.

  • Copilot Vision 세션을 종료할 준비가 되면 부동 도구 모음에서 중지 를 클릭합니다. 세션이 종료되면 Copilot는 즉시 관찰을 중지합니다.

Edge에서 Copilot Vision 사용

Copilot Vision은 유해하거나 성인용 콘텐츠를 포함하는 사이트를 제외하고 대부분의 사이트 및 페이지에서 작동합니다.  Copilot Vision이 지원하지 않는 사이트를 방문하면 화면 맨 아래에 있는 Copilot Composer가 회색으로 표시된 아이콘과 교차된 안경을 표시하고 모델은 페이지의 내용에 대해 논의하지 않습니다. 

사용 방법은 다음과 같습니다.

  1. 개인 Microsoft 계정으로 Edge에 로그인합니다.

  2. Edge 도구 모음에서 Copilot 아이콘을 클릭합니다.

  3. 그런 다음, 음성(웨이브) 단추 웨이브 단추를 클릭합니다.

  4. Copilot Vision이 활성화되면 코필로트 쪽 창에 안경 아이콘 A 쌍의 검은색 안경 아이콘 과 마이크 아이콘 Teams 마이크 아이콘 이 표시됩니다.

  5. Copilot에 대해 물어보려는 지원되는 웹 사이트, 비디오 또는 PDF로 이동합니다.

    참고

    비전 세션이 진행되는 동안 안경 아이콘이 있는 도구 모음 코필로트 쪽 창에 검은색 안경 아이콘 이 열려 활성 비전 세션에 있음을 나타내는 도구 모음이 표시됩니다. Copilot Vision은 Vision 세션을 종료할 때까지 다른 페이지를 탐색하는 동안 계속 유지됩니다. 

  6. Copilot Vision은 페이지를 살펴본 다음 코필로트와 콘텐츠에 대해 자연스러운 대화를 나눌 수 있도록 합니다.

  7. Copilot 창 아래쪽의 도구 모음에서 X를 클릭하거나 전체 Copilot 측면 창을 닫거나 Edge를 종료하여 세션을 중지할 수 있습니다.

모바일에서 Copilot Vision 사용

iOS 및 Android 디바이스의 Copilot 모바일 앱에서 Copilot Vision에 액세스할 수 있습니다.   

Copilot Vision은 모바일 장치 카메라를 통해 보는 내용에 따라 질문에 답변합니다.

사용 방법은 다음과 같습니다.

  • Copilot 모바일 앱에서 안경 아이콘 A 쌍의 검은색 안경 아이콘 을 탭하여 Copilot Vision 세션을 시작합니다.  그러면 모바일 디바이스 카메라가 시작됩니다.

    참고: 먼저 이 기능을 사용하려면 디바이스 카메라에 액세스할 수 있는 권한을 Copilot 앱에 부여해야 합니다.

  • 코필로트와 대화하고 카메라를 통해 또는 화면에 표시되는 내용에 대해 질문합니다. Copilot Vision은 Vision 세션을 종료할 때까지 계속 유지됩니다.

  • Copilot Vision 세션을 종료하려면 X 아이콘을 탭합니다.