Sử dụng Copilot Vision với Microsoft Copilot

Microsoft Copilot Vision là một cách mới để AI làm việc cùng bạn khi bạn sử dụng PC Windows hoặc máy Mac, duyệt web trong Microsoft Edge hoặc xem thế giới từ điện thoại. Nó hoạt động như một cặp mắt thứ hai có thể quét, phân tích và cung cấp thông tin chuyên sâu dựa trên những gì Copilot nhìn thấy. Khi bạn bắt đầu phiên Copilot Vision, Copilot có thể xem màn hình, ứng dụng, trang hoặc nguồn cấp dữ liệu từ camera di động mà bạn chọn chia sẻ, sau đó sử dụng Lệnh thoại Copilot để trả lời các câu hỏi và hướng dẫn bạn về những gì bạn đang xem.

Tình trạng sẵn có của Copilot Vision có thể khác nhau trong quá trình triển khai. Tính năng Vision khả dụng ở tất cả các khu vực và ngôn ngữ được hỗ trợ đồng thời có thể truy cập từ Windows, Edge và ứng dụng di động Copilot trên iOS và Android. Bạn phải đăng ký Microsoft 365 Personal, Family hoặc Premium để truy cập Copilot Vision.

Cách Copilot Vision xử lý dữ liệu của bạn

Copilot Vision chỉ hoạt động khi bạn bắt đầu phiên Vision. Bộ phận xử lý dữ liệu của bạn theo Tuyên bố về quyền riêng tư của Microsoft.

Khi bạn sử dụng Vision, phản hồi của Copilot có thể được ghi lại để giúp theo dõi các tương tác và kết quả không an toàn. Dữ liệu đầu vào của người dùng, hình ảnh, âm thanh và nội dung trang được chia sẻ không được sử dụng để đào tạo người mẫu hoặc cá nhân hóa trải nghiệm của bạn. Dữ liệu phiên có thể được lưu giữ tạm thời trong tối đa 47 giờ để hỗ trợ phản hồi do người dùng gửi và sau đó sẽ tự động bị xóa nếu không có phản hồi nào được gửi.

Tính năng Vision không thay mặt bạn tương tác trực tiếp với PC, web hoặc điện thoại của bạn. Nó ở đó để trả lời các câu hỏi và hướng dẫn bạn, không phải để thực hiện hành động cho bạn. Copilot Vision có thể tô sáng các phần của màn hình để giúp bạn tìm thấy thông tin liên quan nhưng tính năng này không bấm, nhập văn bản hoặc cuộn thay mặt bạn.

Lần đầu tiên bạn sử dụng Vision trong Windows, macOS, Edge hoặc Copilot dành cho thiết bị di động, Copilot sẽ yêu cầu bạn xác nhận thông báo về quyền riêng tư.

Vision có sẵn cho người dùng thương mại đã đăng nhập bằng ID Entra của họ trong web và các ứng dụng dành cho thiết bị di động Copilot.

Sử dụng Copilot Vision trên Windows

Copilot Vision cho phép bạn chia sẻ các ứng dụng hoặc cửa sổ trình duyệt đã chọn với Copilot trong một phiên đang hoạt động. Copilot có thể trả lời các câu hỏi về nội dung bạn chọn chia sẻ và cung cấp hướng dẫn từng bước.

Khi phiên Tầm nhìn đang hoạt động, Copilot có thể trả lời các câu hỏi về ứng dụng hoặc cửa sổ trình duyệt mà bạn đã chia sẻ, ngay cả khi chúng không còn mở trước mặt bạn nữa. Khi phiên Tầm nhìn kết thúc, Copilot ngay lập tức ngừng quan sát nội dung bạn đã chia sẻ và ngữ cảnh được chia sẻ không còn khả dụng cho phiên Tầm nhìn hiện hoạt.

Copilot Vision hoạt động với bất kỳ ứng dụng nào trên Windows. Tuy nhiên, nếu nội dung bao gồm tài liệu có hại hoặc được bảo vệ bằng DRM, Copilot không thể phân tích nội dung đó.

Để sử dụng Copilot Vision trên Windows:

1. Bắt đầu cuộc gọi thoại trong Copilot. Tính năng Tìm kiếm sẽ tắt theo mặc định.
2. Để thêm Vision vào phiên Thoại, hãy chọn Chia sẻ màn hình.
3. Chọn màn hình hoặc ứng dụng bạn muốn chia sẻ với Copilot. Khi Copilot Vision đang hoạt động, bạn sẽ thấy một đường viền xung quanh màn hình hoặc ứng dụng được chia sẻ. Bạn có thể chia sẻ tối đa hai ứng dụng cùng một lúc.
4. Đảm bảo rằng đã bật micrô và âm thanh của bạn. Copilot Vision sử dụng đầu vào và đầu ra bằng giọng nói để trả lời các câu hỏi về nội dung bạn đang chia sẻ.
5. Thanh công cụ trôi nổi xuất hiện với các điều khiển Dang thị và Giọng nói. Copilot sẽ chào đón bạn và bạn có thể bắt đầu đặt câu hỏi về nội dung được chia sẻ.
6. Để tắt tiếng của chính bạn, hãy chọn biểu tượng micrô . Thao tác này khiến Copilot ngừng nghe. Chọn lại biểu tượng micrô để tiếp tục.
7. Để kết thúc phiên Tầm nhìn, hãy chọn Dừng trong thanh công cụ trôi nổi. Khi phiên kết thúc, Copilot ngay lập tức ngừng quan sát nội dung được chia sẻ.

Sử dụng Copilot Vision trong Edge

Copilot Vision hoạt động với hầu hết các trang web và trang, ngoại trừ những trang có nội dung có hại hoặc người lớn. Khi bạn truy cập một trang web mà Copilot Vision không hỗ trợ, trình soạn thảo Copilot ở cuối màn hình sẽ hiển thị biểu tượng chuyển xám và Copilot sẽ không thảo luận về nội dung của trang.

Để sử dụng Copilot Vision trong Edge:

1. Đăng nhập vào Edge bằng tài khoản Microsoft cá nhân của bạn.
2. Chọn biểu tượng Copilot trên thanh công cụ Edge.
3. Chọn nút Giọng nói (sóng) .
4. Bắt đầu phiên Thoại với Copilot.
5. Chọn Chia sẻ màn hình để thêm Vision vào phiên Thoại.
6. Truy nhập bất kỳ trang web, video hoặc PDF được hỗ trợ nào mà bạn muốn hỏi Copilot. Khi bạn sử dụng Vision, thanh công cụ trong ngăn bên của Copilot sẽ cho bạn biết phiên Vision của bạn đang hoạt động. Tầm nhìn sẽ đồng hành cùng bạn khi bạn duyệt từ trang này sang trang khác cho đến khi bạn sẵn sàng kết thúc phiên.
7. Đặt câu hỏi cho Copilot về trang hoặc nội dung bạn đang xem.
8. Để dừng phiên, hãy chọn X trong thanh công cụ ở cuối cửa sổ Copilot, đóng ngăn bên Copilot hoặc thoát khỏi Edge.

Sử dụng Copilot Vision trên thiết bị di động

Bạn có thể truy cập Copilot Vision trong ứng dụng di động Copilot trên cả thiết bị iOS và Android. Copilot Vision trả lời các câu hỏi dựa trên những gì nó nhìn thấy qua máy ảnh hoặc màn hình thiết bị di động của bạn.

Để sử dụng Copilot Vision trên thiết bị di động:

1. Trong ứng dụng Copilot dành cho thiết bị di động, bắt đầu phiên Thoại với Copilot, sau đó chọn Chia sẻ màn hình. Thao tác này sẽ khởi động camera trên thiết bị di động của bạn.
   • Bạn cần cấp cho ứng dụng Copilot quyền truy nhập vào camera thiết bị của mình để sử dụng tính năng này.
2. Nói chuyện với Copilot và đặt câu hỏi về những gì bạn nhìn thấy qua camera hoặc trên màn hình của bạn. Copilot Vision sẽ vẫn bật cho đến khi bạn kết thúc phiên Tầm nhìn.
3. Để kết thúc phiên Copilot Vision, hãy chọn X.