搭配 Microsoft Copilot 使用 Copilot 視覺
Microsoft CopilotVision 是一種讓您在使用 Windows PC 或 Mac、在 Microsoft Edge 中瀏覽網頁或透過手機查看世界時讓 AI 與您合作的新方式。 它就像第二雙眼睛,可以根據 Copilot 看到的內容立即掃描、分析並提供見解。 當您啟動 Copilot Vision 時,Copilot 可以檢視您的螢幕或行動攝影機來源,並使用 Copilot 語音回答問題並與您互動。
附註: Copilot 視覺不會擷取、儲存或使用任何資料來訓練我們的模型。 不會保留、轉錄或記錄任何影像。 一旦 Copilot 視覺會話結束,所有影像、音訊和內容都會被刪除。 正在儲存模型回應,以便能夠監控不安全的互動。 您與 Vision 的對話記錄會儲存在您的對話記錄中,但不會用於訓練或個人化。 您可以隨時刪除您的聊天記錄。
Copilot 視覺 適用於所有支援的地區和語言,並且可以從 Windows、Edge 以及 iOS 和 Android) Copilot 行動裝置應用程式 (存取。 您必須登入 Copilot 才能存取 Vision。
Microsoft 365 個人版、家用版和進階版的訂閱者會獲得 Vision 的延伸使用限制。
Copilot Vision 如何處理您的資料
Copilot 只有在您啟動視覺工作階段時,視覺才會處於作用中狀態。 它會根據 Microsoft 的隱私權聲明處理您的資料。
使用 Vision 時,只會記錄 Copilot的回應,以便監控不安全的互動和輸出。 使用者輸入、影像和頁面內容不會被記錄或儲存。 語音工作階段結束後,此資料將被刪除。
Vision 不會代表您直接與您的 PC、網路或手機互動,它只是為了回答問題而不是採取行動。 Copilot 視覺可能會突出顯示屏幕的某些部分,以幫助您找到相關信息。 它不會代表您點擊、輸入文字或捲動。
當您第一次在 Windows、MacOS、Edge 和 Copilot Mobile 中使用 Vision 時, Copilot 會要求您確認隱私聲明。
使用 Entra ID 帳戶登入 Copilot 或 Edge 的商業使用者無法使用 Vision。
在 Windows 上使用 Copilot Vision
在 Windows 上使用 Copilot ,您可以讓 Vision 查看您在螢幕上開啟的瀏覽器視窗或應用程式。 Copilot 然後,視力可以回答問題或幫助您逐步做某事。
Copilot Vision 適用於 Windows 上的任何應用程序。 但是,如果內容包含有害或受 DRM 保護的材料, Copilot 將無法對其進行分析。
以下是執行的方式:
-
按一下撰寫器中的眼鏡圖示,在 Copilot 應用程式中啟動 Copilot 視覺
工作階段。 -
選取您要與 Copilot共用的 Windows 應用程式,或注意: 您一次只能選取兩個應用程式。
-
將出現一個帶有 Copilot 語音和視覺控件的浮動工具欄, Copilot 將播放音頻問候語。 此時,您可以與 Copilot 進行語音對話,並詢問有關您在共享應用程式上看到的內容的問題。
-
您可以透過點擊麥克風圖示將自己靜音,這將停用麥克風並停止 Copilot 收聽。 再次點擊麥克風圖示將取消靜音,讓您可以繼續對話。
-
如果您向 Copilot Vision 尋求有關如何使用特定應用程式的協助,它可能會在螢幕上顯示一個突出顯示的遊標
以指出某些內容。 Vision 不會在您的 PC 上為您執行操作,但它可以解釋並顯示您下一步應該做什麼。 -
準備好結束 Copilot Vision 工作階段後,按一下浮動工具列中的 停止 。
在 Edge 中使用Copilot Vision
Copilot Vision 適用於大多數網站,但包含有害或成人內容的網站除外。 當您造訪 Copilot Vision 不支援的網站時,螢幕底部的 Copilot Composer 將顯示一個灰色的圖示和交叉眼鏡,並且模型將拒絕討論頁面內容。
以下是執行的方式:
-
使用您的個人 Microsoft 帳戶登入 Edge。 如果您之前未執行此操作,請了解如何在 Microsoft Edge 中登入並建立多個設定檔。
-
在 Edge 中導覽至您想要提問的網站、影片或 PDF 文件。
-
按 Edge 右上角的 Copilot 圖示
,在 Edge 側邊欄中開啟 Copilot 。 -
按下語音按鈕
提出問題。便條: 當 Vision 工作階段正在進行時,您將看到一個浮動工具列, 帶有眼鏡圖示,表示您處於活動的 Vision 工作階段中。 Copilot 當您瀏覽不同頁面時,Vision 會保持開啟狀態,直到您結束 Vision 工作階段為止。 -
Copilot Vision 會查看頁面,然後讓您與 Copilot 就內容進行自然對話。
-
您可以關閉浮動 Copilot 工具列或關閉 Edge 視窗來結束 Vision 工作階段。
在行動裝置上使用 Copilot Vision
您可以在 iOS 和 Android 裝置上的 Copilot 行動應用程式中存取Copilot 視覺。
Copilot Vision 會根據它透過行動裝置相機看到的內容來回答問題。
以下是執行的方式:
-
在 Copilot 行動應用程式中,點選眼鏡圖示
以開始 Copilot Vision 工作階段。 這將啟動您的行動裝置相機。便條:您首先需要授予 Copilot 應用程序訪問設備相機的權限才能使用此功能。 -
與 Copilot 交談並詢問有關您透過相機或螢幕看到的內容的問題。 Copilot Vision 將保持開啟狀態,直到您結束 Vision 工作階段。
-
若要結束 Copilot Vision 工作階段,請點選 X 圖示。