การใช้กล้อง Copilot กับ Microsoft Copilot

Microsoft Copilot ค้นหาด้วยกล้อง เป็นวิธีใหม่ในการให้ AI ทํางานร่วมกับคุณเมื่อคุณใช้พีซี Windows หรือ Mac นําทางเว็บใน Microsoft Edge หรือดูโลกจากโทรศัพท์ของคุณ  เป็นเหมือนดวงตาชุดที่สองที่สามารถสแกน วิเคราะห์ และเสนอข้อมูลเชิงลึกได้ทันทีโดยอ้างอิงจากสิ่งที่ Copilot เห็น  เมื่อคุณเปิดใช้งาน Copilot ค้นหาด้วยกล้อง Copilot จะสามารถดูฟีดหน้าจอหรือกล้องมือถือของคุณ และใช้ Copilot Voice เพื่อตอบคําถามและโต้ตอบกับคุณ 

วิสัยทัศน์ Copilot พร้อมใช้งานใน ภูมิภาคและภาษาที่รองรับ ทั้งหมด และสามารถเข้าถึงได้จาก Windows, Edge และแอป Copilot สําหรับอุปกรณ์เคลื่อนที่ (iOS และ Android)  คุณต้องลงชื่อเข้าใช้ Copilot เพื่อเข้าถึงวิสัยทัศน์

สมาชิกของ Microsoft 365 Personal, Family และ Premium จะได้รับขีดจํากัดการใช้งานที่ขยายเวลาของกล้อง   

วิธีที่ Copilot ค้นหาด้วยกล้องในการจัดการข้อมูลของคุณ

Copilot ค้นหาด้วยกล้องจะทํางานเมื่อคุณเริ่มต้นเซสชันวิสัยทัศน์เท่านั้น โดยจะจัดการข้อมูลของคุณตามนโยบายความเป็นส่วนตัวของ Microsoft   

เมื่อใช้กล้อง ระบบจะแสดงเฉพาะการตอบสนองของ Copilot เท่านั้นเพื่อเปิดใช้งานการตรวจสอบการโต้ตอบและผลลัพธ์ที่ไม่ปลอดภัย การป้อนข้อมูล รูป และเนื้อหาของเพจของผู้ใช้จะไม่ถูกบันทึกหรือจัดเก็บไว้  เมื่อเซสชันเสียงสิ้นสุด ข้อมูลนี้จะถูกลบ   

วิสัยทัศน์จะไม่มีส่วนร่วมโดยตรงกับพีซี เว็บ หรือโทรศัพท์ของคุณในนามของคุณ ซึ่งมีไว้เพื่อตอบคําถามแทนที่จะดําเนินการ วิสัยทัศน์ Copilot อาจเน้นส่วนของหน้าจอเพื่อช่วยให้คุณค้นหาข้อมูลที่เกี่ยวข้อง ซึ่งจะไม่คลิก ใส่ข้อความ หรือเลื่อนในนามของคุณ 

ครั้งแรกที่คุณใช้ Vision ใน Windows, MacOS, Edge และ Copilot Mobile Copilot จะขอให้คุณรับทราบประกาศความเป็นส่วนตัว   

วิสัยทัศน์ไม่พร้อมใช้งานสําหรับผู้ใช้เชิงพาณิชย์ที่ลงชื่อเข้าใช้ Copilot หรือ Edge ด้วยบัญชี ID Entra 

การใช้ Copilot ค้นหาด้วยกล้องบน Windows

Copilot ค้นหาด้วยกล้องช่วยให้คุณสามารถแชร์หน้าต่างเบราว์เซอร์หรือแอปที่เลือกกับ Copilot ในระหว่างเซสชันที่ใช้งานอยู่ได้ Copilot สามารถตอบคําถามเกี่ยวกับสิ่งที่คุณเลือกที่จะแชร์และให้คําแนะนําทีละขั้นตอน

ในขณะที่เซสชันค้นหาด้วยภาพใช้งานอยู่ Copilot สามารถตอบคําถามเกี่ยวกับหน้าต่างของแอปหรือเบราว์เซอร์ที่คุณแชร์ระหว่างเซสชันที่ใช้งานอยู่ได้ แม้ว่าหน้าต่างเหล่านั้นจะไม่ได้เปิดอยู่ข้างหน้าคุณอีกต่อไปก็ตาม เมื่อเซสชันวิสัยทัศน์สิ้นสุดลง Copilot จะหยุดสังเกตทันที และบริบทที่แชร์ทั้งหมดจะถูกล้าง

Copilot ค้นหาด้วยกล้องทํางานร่วมกับแอปใดๆ บน Windows อย่างไรก็ตามหากเนื้อหามีเนื้อหาที่เป็นอันตรายหรือมีการป้องกันจาก DRM Copilot จะไม่สามารถวิเคราะห์ได้ 

วิธีการใช้มีดังนี้:

• เริ่มต้นเซสชัน Copilot ค้นหาด้วยกล้องในแอป Copilot โดยคลิกที่ไอคอนแว่นตา ผู้ประพันธ์

• เลือกหน้าจอหรือแอปที่คุณต้องการแชร์กับ Copilot ขณะที่ Copilot ค้นหาด้วยกล้องทํางานอยู่ คุณจะเห็นเค้าร่างสีส้มเรืองแสงรอบๆ หน้าจอหรือแอปที่แชร์
   

  หมายเหตุ

  คุณสามารถเลือกได้ครั้งละสองแอปเท่านั้น

• ค้นหาด้วยกล้องจะเริ่มต้น ด้วยข้อความที่ เปิดใช้งานตามค่าเริ่มต้น สถานะการมองเห็นและตัวควบคุมจะปรากฏภายในแผง Copilot ที่เทียบชิดขอบ คุณสามารถสนทนาทางข้อความกับ Copilot และถามคําถามเกี่ยวกับสิ่งที่คุณเห็นในแอปที่แชร์ได้

• ถ้าคุณเปลี่ยนการสลับเป็น เริ่มต้นด้วยเสียง แถบเครื่องมือลอยจะแสดง ตัวควบคุมกล้องและเสียง คุณจะได้ยิน Copilot เล่นเสียงทักทาย จากนั้นคุณสามารถสนทนาด้วยเสียงกับ Copilot และถามคําถามเกี่ยวกับสิ่งที่คุณเห็นในแอปที่แชร์ได้

• คุณสามารถปิดเสียงตัวคุณเองได้โดยการคลิกไอคอนไมโครโฟน ซึ่งจะปิดใช้งานไมโครโฟนและหยุด Copilot ไม่ให้ฟัง คลิกไอคอนไมโครโฟนอีกครั้งเพื่อดําเนินการต่อ

• หากคุณขอให้ Copilot ค้นหาด้วยกล้องสําหรับความช่วยเหลือเกี่ยวกับวิธีการใช้แอปเฉพาะ แอปนั้นอาจแสดง ที่ไฮไลต์อยู่บนหน้าจอเพื่อชี้ให้เห็นบางอย่าง วิสัยทัศน์จะไม่ดําเนินการกับพีซีของคุณ แต่สามารถอธิบายและแสดงสิ่งที่คุณควรทําต่อไปได้

• เมื่อคุณพร้อมที่จะสิ้นสุดเซสชัน Copilot ค้นหาด้วยกล้อง ให้คลิก หยุด ในแถบเครื่องมือลอย เมื่อเซสชันสิ้นสุดลง Copilot จะหยุดสังเกตทันที

การใช้ Copilot ค้นหาด้วยกล้องใน Edge

Copilot ค้นหาด้วยกล้องทํางานร่วมกับไซต์และเพจส่วนใหญ่ ยกเว้นเว็บไซต์ที่มีเนื้อหาที่เป็นอันตรายหรือเนื้อหาสําหรับผู้ใหญ่  เมื่อคุณเยี่ยมชมเว็บไซต์ที่ วิสัยทัศน์ Copilot ไม่สนับสนุน Copilot Composer ที่ด้านล่างของหน้าจอจะแสดงไอคอนเป็นสีเทาและแว่นตากากบาท และโมเดลจะไม่พูดถึงเนื้อหาของหน้า 

วิธีการใช้มีดังนี้:

1. ลงชื่อเข้าใช้ Edge ด้วยบัญชี Microsoft ส่วนบุคคลของคุณ

2. คลิกไอคอน Copilot ในแถบเครื่องมือ Edge

3. จากนั้นคลิกปุ่ม เสียง (คลื่น)

4. เมื่อ Copilot ค้นหาด้วยกล้องทํางาน บานหน้าต่างด้านข้าง Copilot จะปรากฏขึ้นพร้อมไอคอนแว่นตา ไอคอนไมโครโฟน

5. ไปที่เว็บไซต์ วิดีโอ หรือ PDF ที่รองรับที่คุณต้องการสอบถาม Copilot

   หมายเหตุ

   ในขณะที่เซสชันการมองเห็นกําลังดําเนินอยู่ คุณจะเห็นแถบเครื่องมือที่มีไอคอนแว่นตา เปิดในบานหน้าต่างด้านข้าง Copilot ของคุณซึ่งระบุว่าคุณอยู่ในเซสชันค้นหาด้วยภาพที่ใช้งานอยู่ Copilot ค้นหาด้วยกล้องจะยังคงเปิดอยู่ในขณะที่คุณเรียกดูหน้าอื่นๆ จนกว่าคุณจะสิ้นสุดเซสชันวิสัยทัศน์ 

6. Copilot ค้นหาด้วยกล้องจะดูที่หน้า จากนั้นให้คุณได้สนทนาอย่างเป็นธรรมชาติกับ Copilot เกี่ยวกับเนื้อหา

7. คุณสามารถหยุดเซสชันได้โดยการคลิก X ในแถบเครื่องมือที่ด้านล่างของหน้าต่าง Copilot ปิดบานหน้าต่างด้านข้าง Copilot ทั้งหมด หรือออกจาก Edge

การใช้กล้อง Copilot บนมือถือ

คุณสามารถเข้าถึง วิสัยทัศน์ Copilot ได้ในแอป Copilot สําหรับอุปกรณ์เคลื่อนที่บนอุปกรณ์ iOS และ Android   

Copilot ค้นหาคําตอบของคําถามโดยอ้างอิงจากสิ่งที่เห็นผ่านกล้องของอุปกรณ์เคลื่อนที่ของคุณ

วิธีการใช้มีดังนี้:

• ในแอป Copilot สําหรับอุปกรณ์เคลื่อนที่ ให้แตะไอคอนแว่นตา เริ่มเซสชัน วิสัยทัศน์ Copilot  การทําเช่นนี้จะเป็นการเริ่มต้นกล้องของอุปกรณ์เคลื่อนที่ของคุณ

  หมาย เหตุ: ก่อนอื่นคุณต้องอนุญาตให้แอป Copilot เข้าถึงกล้องอุปกรณ์ของคุณเพื่อใช้ฟีเจอร์นี้

• พูดคุยกับ Copilot และถามคําถามเกี่ยวกับสิ่งที่คุณเห็นผ่านกล้องหรือบนหน้าจอของคุณ กล้อง Copilot จะยังคงอยู่จนกว่าคุณจะสิ้นสุดเซสชันวิสัยทัศน์

• เมื่อต้องการสิ้นสุดเซสชัน Copilot ค้นหาด้วยกล้อง ให้แตะไอคอน X