Tầm nhìn trong Microsoft 365 Copilot cho phép bạn chia sẻ màn hình máy tính hoặc camera di động và hỏi Copilot về những gì bạn đang xem, với các câu trả lời căn cứ vào cả nội dung được chia sẻ và dữ liệu công việc của bạn. Để bắt đầu sử dụng tính năng này, hãy xem Bắt đầu với thị lực Microsoft 365 Copilot.
Tầm nhìn hoạt động như thế nào?
Tầm nhìn chuyển nội dung bạn chia sẻ thành thông tin mà Copilot có thể đưa ra lý do, sau đó kết hợp nội dung đó với dữ liệu công việc của bạn để trả lời bạn rõ ràng.
- Bạn chia sẻ phương thức nhập trực quan trong cuộc hội thoại: màn hình máy tính (trên Windows hoặc web) hoặc camera di động của bạn.
- Copilot chuyển đổi màn hình hoặc nội dung camera dùng chung thành dữ liệu mà họ có thể phân tích, bao gồm văn bản, hình ảnh, biểu đồ và giao diện trên màn hình.
- Copilot căn cứ vào phản hồi của mình bằng cách kết hợp thông tin hiển thị với dữ liệu công việc Microsoft 365 của bạn, chẳng hạn như tài liệu, email và các cuộc thảo luận trước đó.
- Copilot trả lời bằng giọng nói trong thời gian thực, vì vậy bạn có thể đặt câu hỏi theo dõi trong cùng một cuộc hội thoại.
Tầm nhìn có thể làm gì?
Dưới đây là một số thao tác hữu ích nhất mà bạn có thể thực hiện với thị lực:
- Phân tích và giải thích những gì bạn đang xem. Yêu cầu Copilot diễn giải biểu đồ, bảng, trang chiếu hoặc văn bản dày đặc. Ví dụ: "Tóm tắt bảng điều khiển này và tô sáng bất kỳ điểm bất thường nào".
- Chuyển phản hồi thành các bước tiếp theo. Chia sẻ một trang tài liệu, email hoặc cuộc trò chuyện và hỏi : "Tôi đã nhận được phản hồi nào về điều này và các bước tiếp theo của tôi là gì?"
- Tải bản cập nhật trạng thái dự án. Chia sẻ một trình theo dõi hoặc mục công việc và hỏi "Cung cấp cho tôi trạng thái nhanh chóng của mục này, chủ sở hữu hiện tại và mốc thời gian tiếp theo".
- Nhận trợ giúp từng bước, theo ngữ cảnh. Trỏ camera điện thoại vào lỗi thiết bị và hỏi "Làm cách nào để khắc phục lỗi này?"
Những hạn chế của tầm nhìn là gì?
- Vision hiện chỉ khả dụng thông qua các cuộc trò chuyện bằng giọng nói với Copilot.
- Việc sử dụng hàng ngày được dựa trên công suất có sẵn và tính vào mức sử dụng giọng nói hàng ngày của bạn. Bạn sẽ được thông báo trong ứng dụng Copilot khi tiếp cận mức sử dụng có sẵn.
- Tầm nhìn không thể đọc video hoặc GIF động.
- Việc chuyển đổi giữa các cửa sổ quá nhanh trong khi đặt câu hỏi có thể khiến Copilot phản hồi dựa trên nội dung màn hình sai.
- Thị giác không thể hành động hoặc thao tác trực tiếp các mục trên màn hình của bạn.
- Tầm nhìn không thu hồi lâu dài. Ứng dụng này không sử dụng lại màn hình hoặc đầu vào camera từ các phiên trước.
Lưu ý
Đây là các khả năng khi khởi chạy. Các cải tiến liên tục có thể giải quyết một số hạn chế này theo thời gian.
Tầm nhìn có quyền truy cập vào những gì?
Trong một phiên hoạt động, Copilot xử lý màn hình hoặc nội dung camera bạn chọn chia sẻ, cùng với dữ liệu công việc Microsoft 365 của bạn để đáp lại các câu trả lời, chẳng hạn như tài liệu, email, cuộc họp và các cuộc thảo luận trước đó.
- Đầu vào trực quan là do người dùng khởi tạo và gắn kết phiên, vì vậy Copilot chỉ hoạt động với nội dung được chia sẻ trong phiên hoạt động.
- Màn hình hoặc nội dung camera chia sẻ được xử lý dưới dạng một chuỗi hình ảnh. Dữ liệu âm thanh và video được lưu trữ tạm thời để bạn cung cấp phản hồi cho Microsoft và sẽ bị xóa sau 48 giờ.
- Bản chép lại văn bản từ các cuộc hội thoại được lưu trữ và quản lý giống như các cuộc hội thoại văn bản trong Microsoft 365 Copilot thoại.
- Vision tuân thủ các cam kết cấp doanh nghiệp của Microsoft về bảo mật và quyền riêng tư dữ liệu, đồng thời Tầm nhìn không suy ra các thuộc tính cá nhân nhạy cảm như chủng tộc hoặc cảm xúc.
Để biết thêm thông tin, hãy xem Dữ liệu, Quyền riêng tư và Bảo mật Microsoft 365 Copilot.
Loại nội dung nào được hỗ trợ?
Tầm nhìn có thể hiểu một loạt các nội dung trên màn hình và thế giới thực, bao gồm:
- Văn bản, hình ảnh, biểu đồ, bảng và bảng điều khiển.
- Giao diện ứng dụng và dòng công việc nhiều cửa sổ trên máy tính để bàn.
- Các đối tượng vật lý được xem qua camera di động của bạn.
Ngôn ngữ nào được hỗ trợ?
Tầm nhìn khả dụng ở tất cả các ngôn ngữ được hỗ trợ bởi Microsoft 365 Copilot. Một số ngôn ngữ có thể dễ bị phát âm hoặc nhận dạng khác biệt. Để biết danh sách đầy đủ, hãy xem Các ngôn ngữ được hỗ trợ để biết Microsoft 365 Copilot.
Các cuộc hội thoại thị giác được đánh giá như thế nào? Số liệu nào được sử dụng để đo hiệu suất?
Để đảm bảo chất lượng, Copilot được cung cấp các câu hỏi kiểm tra và phản hồi của nó được đánh giá dựa trên các tiêu chí như mức độ liên quan, tính chính xác, tính hoàn chỉnh, âm điệu và tuân thủ hướng dẫn. Để đo hiệu suất tốt hơn, chúng tôi cũng xem xét mức sử dụng tính năng, tỷ lệ theo dõi, tỷ lệ tương tác và phản hồi của người dùng. Chúng tôi cũng tiến hành một loạt các đánh giá an toàn nhằm đảm bảo tầm nhìn phản hồi một cách có trách nhiệm đối với các truy vấn có hại.
Làm cách nào để cung cấp phản hồi về tầm nhìn trong Copilot?
Bạn có thể cung cấp phản hồi sau khi kết thúc trò chuyện bằng giọng nói. Bạn sẽ thấy ngón tay cái hướng lên/xuống xuất hiện trong lịch sử trò chuyện được chia sẻ với Microsoft để biết các cải tiến về tính năng. Chúng tôi không sử dụng phản hồi này để đào tạo các mô hình nền tảng mà Copilot sử dụng.