Microsoft Copilot Vision은 Windows PC 또는 Mac을 사용하거나, Microsoft Edge에서 웹을 검색하거나, 휴대폰에서 세계를 볼 때 AI와 함께 작업할 수 있는 새로운 방법입니다. Copilot이 보는 것을 기반으로 인사이트를 스캔, 분석 및 제공할 수 있는 두 번째 눈 세트 역할을 합니다. Copilot Vision 세션을 시작하면 Copilot은 공유하도록 선택한 화면, 앱, 페이지 또는 모바일 카메라 피드를 본 다음 Copilot Voice를 사용하여 질문에 답변하고 보고 있는 내용을 안내할 수 있습니다.
참고
Copilot Vision은 Vision 세션의 데이터를 사용하여 모델을 학습시키지 않습니다. 세션 데이터는 사용자가 제출한 피드백을 지원하기 위해 최대 47시간 동안 일시적으로 보존될 수 있으며, 피드백이 제출되지 않으면 이후에 자동으로 삭제됩니다. Vision과의 대화 기록은 나중에 다시 볼 수 있도록 채팅 기록에 저장됩니다. 대화 기록은 교육 또는 개인 설정에 사용되지 않으며 언제든지 삭제할 수 있습니다.
Copilot Vision 가용성은 출시하는 동안 달라질 수 있습니다. 비전은 지원되는 모든 지역과 언어로 사용할 수 있으며 Windows, Edge, iOS 및 Android의 Copilot 모바일 앱에서 액세스할 수 있습니다. Copilot Vision에 액세스하려면 Microsoft 365 Personal, Family 또는 Premium을 구독해야 합니다.
Copilot Vision이 데이터를 처리하는 방법
Copilot 비전은 비전 세션을 시작할 때만 활성화됩니다. Microsoft의 개인정보처리방침에 따라 데이터를 처리합니다.
Vision을 사용하는 경우 안전하지 않은 상호 작용 및 출력을 모니터링하는 데 도움이 되도록 Copilot 응답을 기록할 수 있습니다. 사용자 입력, 이미지, 오디오 및 공유 페이지 콘텐츠는 모델을 학습시키거나 환경을 개인 설정하는 데 사용되지 않습니다. 세션 데이터는 사용자가 제출한 피드백을 지원하기 위해 최대 47시간 동안 일시적으로 보존될 수 있으며, 피드백이 제출되지 않으면 이후에 자동으로 삭제됩니다.
비전은 사용자를 대신하여 PC, 웹 또는 휴대폰과 직접 상호 작용하지 않습니다. 그것은 당신을 대신하여 조치를 취하기 위해 있는 것이 아니라 질문에 답하고 안내하기 위해 존재합니다. Copilot Vision은 관련 정보를 찾는 데 도움이 되도록 화면의 일부를 강조 표시할 수 있지만 사용자를 대신하여 클릭하거나 텍스트를 입력하거나 스크롤하지는 않습니다.
Windows, macOS, Edge 또는 Copilot 모바일에서 Vision을 처음 사용하는 경우 Copilot은 개인 정보 처리 방침을 승인하도록 요청합니다.
Vision은 Copilot 웹 및 모바일 앱에서 Entra ID로 로그인한 상용 사용자가 사용할 수 있습니다.
Windows에서 Copilot Vision 사용
Copilot Vision을 사용하면 활성 세션 중에 선택한 브라우저 창 또는 앱을 Copilot과 공유할 수 있습니다. Copilot은 공유하도록 선택하는 항목에 대한 질문에 답변하고 단계별 지침을 제공할 수 있습니다.
비전 세션이 활성화된 동안 Copilot은 사용자가 공유한 앱 또는 브라우저 창이 더 이상 사용자 앞에 열려 있지 않더라도 이러한 창에 대한 질문에 답변할 수 있습니다. 비전 세션이 종료되면 Copilot은 공유한 콘텐츠 관찰을 즉시 중지하고 공유 컨텍스트를 활성 비전 세션에서 더 이상 사용할 수 없습니다.
Copilot Vision은 Windows의 모든 앱에서 작동합니다. 그러나 콘텐츠에 유해하거나 DRM으로 보호되는 자료가 포함된 경우 Copilot은 이를 분석할 수 없습니다.
Windows에서 Copilot Vision을 사용하려면:
- Copilot에서 음성 통화를 시작합니다. 시야는 기본적으로 꺼져 있습니다.
- 음성 세션에 비전을 추가하려면 화면 공유를 선택합니다.
- Copilot과 공유할 화면 또는 앱을 선택합니다. Copilot Vision이 활성화되어 있는 동안 공유 화면 또는 앱 주위에 윤곽선이 표시됩니다. 한 번에 최대 두 개의 앱을 공유할 수 있습니다.
- 마이크와 오디오가 활성화되어 있는지 확인합니다. Copilot Vision은 음성 입력 및 출력을 사용하여 공유하는 콘텐츠에 대한 질문에 답변합니다.
- 비전 및 음성 컨트롤과 함께 부동 도구 모음이 나타납니다. Copilot이 인사하고 공유 콘텐츠에 대한 질문을 시작할 수 있습니다.
- 자신을 음소거하려면 마이크 아이콘 마이크
을 선택합니다. 이렇게 하면 Copilot이 듣는 것이 중지됩니다. 다시 시작하려면 마이크 아이콘을 다시 선택합니다. - 비전 세션을 종료하려면 부동 도구 모음에서 중지 를 선택합니다. 세션이 종료되면 Copilot은 공유 콘텐츠의 관찰을 즉시 중지합니다.
Edge에서 Copilot Vision 사용
Copilot Vision은 유해하거나 성인용 콘텐츠를 포함하는 사이트를 제외한 대부분의 사이트 및 페이지에서 작동합니다. Copilot Vision이 지원하지 않는 사이트를 방문하면 화면 아래쪽의 Copilot 작성기에 회색 아이콘이 표시되고 Copilot이 페이지의 콘텐츠에 대해 논의하지 않습니다.
Edge에서 Copilot Vision을 사용하려면 다음을 수행합니다.
- 개인 Microsoft 계정을 사용하여 Edge에 로그인합니다.
- Edge 도구 모음에서 Copilot 아이콘을 선택합니다.
- 음성(웨이브) 버튼 웨이
을 선택합니다. - Copilot으로 음성 세션을 시작합니다.
- 화면 공유를 선택하여 음성 세션에 비전을 추가합니다.
- Copilot에 문의하려는 지원되는 웹 사이트, 비디오 또는 PDF로 이동합니다. Vision을 사용하는 경우 Copilot 측면 창의 도구 모음을 통해 Vision 세션이 활성 상태임을 알 수 있습니다. 세션을 종료할 준비가 될 때까지 페이지에서 페이지로 탐색하는 동안 비전이 유지됩니다.
- 보고 있는 페이지나 콘텐츠에 대해 Copilot에 질문합니다.
- 세션을 중지하려면 Copilot 창 아래쪽의 도구 모음에서 X 를 선택하거나 Copilot 측면 창을 닫거나 Edge를 종료합니다.
모바일에서 Copilot Vision 사용
참고
Mobile Vision 기능은 곧 출시될 예정입니다. 모바일 비전 및 화면 공유는 iOS 및 Android 장치에서 점진적으로 사용하도록 설정되고 있으므로 출시 중에 사용자마다 사용 가능 여부가 다를 수 있습니다.
iOS 및 Android 디바이스 모두에서 Copilot 모바일 앱의 Copilot Vision에 액세스할 수 있습니다. Copilot Vision은 모바일, 카메라 또는 화면을 통해 보는 것을 기반으로 질문에 답변합니다.
모바일에서 Copilot Vision을 사용하려면:
- Copilot 모바일 앱에서 Copilot과의 음성 세션을 시작한 다음, 화면 공유를 선택합니다. 그러면 모바일 장치 카메라가 시작됩니다.
- 이 기능을 사용하려면 Copilot 앱에 디바이스 카메라에 액세스할 수 있는 권한을 부여해야 합니다.
- Copilot과 대화하고 카메라를 통해 또는 화면에 표시되는 내용에 대해 질문하세요. Copilot 비전은 비전 세션을 종료할 때까지 켜져 있습니다.
- Copilot 비전 세션을 종료하려면 X를 선택합니다.