การมองเห็นใน Microsoft Copilot ช่วยให้คุณสามารถแชร์หน้าจอเดสก์ท็อปหรือกล้องเคลื่อนที่ของคุณ และถาม Copilot เกี่ยวกับสิ่งที่คุณกําลังเห็น ด้วยคําตอบที่ยึดตามทั้งเนื้อหาที่แชร์และข้อมูลงานของคุณ เมื่อต้องการเริ่มต้นใช้งาน ให้ดู เริ่มต้นใช้งานการมองเห็นใน Microsoft Copilot
วิสัยทัศน์ทํางานอย่างไร
วิสัยทัศน์จะเปลี่ยนสิ่งที่คุณแชร์ให้เป็นข้อมูลที่ Copilot สามารถอธิบายได้ จากนั้นรวมเข้ากับข้อมูลงานของคุณเพื่อตอบคุณออกมาดัง ๆ
- คุณแชร์การป้อนข้อมูลด้วยภาพระหว่างการสนทนาด้วยเสียง: หน้าจอเดสก์ท็อป (บน Windows หรือเว็บ) หรือกล้องของอุปกรณ์เคลื่อนที่ของคุณ
- Copilot จะแปลงเนื้อหาหน้าจอหรือกล้องที่แชร์เป็นข้อมูลที่สามารถวิเคราะห์ได้ รวมถึงข้อความ รูปภาพ แผนภูมิ และอินเทอร์เฟซบนหน้าจอ
- Copilot มีพื้นฐานในการตอบกลับโดยการรวมสิ่งที่เห็นเข้ากับข้อมูลการทํางานของ Microsoft 365 ของคุณ เช่น เอกสาร อีเมล และการอภิปรายก่อนหน้านี้
- Copilot จะตอบคําถามด้วยเสียงแบบเรียลไทม์ เพื่อให้คุณสามารถถามคําถามติดตามผลได้ในการสนทนาเดียวกัน
การมองเห็นทําอะไรได้บ้าง?
ต่อไปนี้คือสิ่งที่เป็นประโยชน์ที่สุดบางอย่างที่คุณสามารถทําได้ด้วยการมองเห็น:
- วิเคราะห์และอธิบายสิ่งที่คุณกําลังดู ขอให้ Copilot ตีความแผนภูมิ ตาราง สไลด์ หรือข้อความอัดแน่น ตัวอย่างเช่น "สรุปแดชบอร์ดนี้และเน้นความผิดปกติใดๆ "
- เปลี่ยนคําติชมเป็นขั้นตอนถัดไป แชร์หน้าของเอกสาร อีเมล หรือการสนทนา และถามว่า "ฉันได้รับคําติชมอะไรบ้างเกี่ยวกับเรื่องนี้ และขั้นตอนถัดไปของฉันคืออะไร"
- รับการอัปเดตสถานะโครงการ แชร์ตัวติดตามหรือรายการงาน และถามว่า "บอกสถานะด่วนของรายการนี้ เจ้าของปัจจุบัน และหลักเป้าหมายถัดไป"
- รับความช่วยเหลือตามบริบททีละขั้นตอน หันกล้องโทรศัพท์ของคุณไปที่ข้อผิดพลาดของอุปกรณ์และถามว่า "How do I แก้ไขข้อผิดพลาดนี้"
ข้อจํากัดของการมองเห็นคืออะไร?
- ขณะนี้การมองเห็นจะพร้อมใช้งานผ่านการแชทด้วยเสียงกับ Copilot เท่านั้น
- การใช้ชีวิตประจําวันจะขึ้นอยู่กับความสามารถที่พร้อมใช้งานและนับรวมในการใช้เสียงในแต่ละวันของคุณ คุณจะได้รับการแจ้งเตือนในแอป Copilot เมื่อคุณเข้าใกล้การใช้งานที่พร้อมใช้งาน
- การมองเห็นไม่สามารถอ่านวิดีโอหรือ GIF แบบเคลื่อนไหวได้
- การสลับไปมาระหว่างหน้าต่างเร็วเกินไปขณะถามคําถามอาจทําให้ Copilot ตอบกลับตามเนื้อหาหน้าจอที่ไม่ถูกต้อง
- การมองเห็นไม่สามารถดําเนินการหรือจัดการรายการบนหน้าจอของคุณได้โดยตรง
- วิสัยทัศน์ไม่มีการเรียกคืนในระยะยาว โดยจะไม่นําหน้าจอหรือการป้อนข้อมูลของกล้องจากเซสชันก่อนหน้ามาใช้ใหม่
หมายเหตุ
ความสามารถเหล่านี้คือความสามารถเมื่อเปิดตัว การปรับปรุงอย่างต่อเนื่องอาจแก้ไขข้อจํากัดบางอย่างเหล่านี้เมื่อเวลาผ่านไป
วิสัยทัศน์สามารถเข้าถึงอะไรได้บ้าง?
ในระหว่างเซสชันที่ใช้งานอยู่ Copilot จะประมวลผลเนื้อหาหน้าจอหรือกล้องที่คุณเลือกแชร์ พร้อมกับข้อมูลการทํางานของ Microsoft 365 ของคุณเพื่อเป็นคําตอบ เช่น เอกสาร อีเมล การประชุม และการอภิปรายก่อนหน้า
- การป้อนข้อมูลแบบภาพเป็นการเริ่มต้นโดยผู้ใช้และผูกกับเซสชัน ดังนั้น Copilot จะทํางานกับเนื้อหาที่แชร์ระหว่างเซสชันที่ใช้งานอยู่เท่านั้น
- เนื้อหาหน้าจอหรือกล้องที่แชร์จะได้รับการประมวลผลเป็นชุดรูปภาพ ข้อมูลเสียงและวิดีโอจะถูกจัดเก็บไว้ชั่วคราวเพื่อให้คุณส่งคําติชมไปยัง Microsoft และจะถูกลบออกหลังจาก 48 ชั่วโมง
- การถอดข้อความจากการสนทนาด้วยเสียงจะได้รับการจัดเก็บและจัดการในลักษณะเดียวกับการสนทนาด้วยข้อความในแอป Microsoft Copilot
- วิสัยทัศน์ยึดมั่นในข้อผูกมัดระดับองค์กรของ Microsoft ในเรื่องความปลอดภัยและความเป็นส่วนตัวของข้อมูล และจะไม่อนุมานคุณลักษณะส่วนบุคคลที่ละเอียดอ่อน เช่น เชื้อชาติหรืออารมณ์
สําหรับข้อมูลเพิ่มเติม ให้ดูข้อมูล ความเป็นส่วนตัว และความปลอดภัยสําหรับ Microsoft Copilot
เนื้อหาชนิดใดบ้างที่ได้รับการสนับสนุน
การมองเห็นสามารถเข้าใจเนื้อหาบนหน้าจอและในโลกแห่งความเป็นจริงได้หลากหลาย รวมถึง:
- ข้อความ รูปภาพ แผนภูมิ ตาราง และแดชบอร์ด
- อินเทอร์เฟซของแอปและเวิร์กโฟลว์หลายหน้าต่างบนเดสก์ท็อป
- วัตถุทางกายภาพที่ดูผ่านกล้องมือถือของคุณ
ภาษาใดบ้างที่ได้รับการสนับสนุน
การมองเห็นพร้อมใช้งานในทุกภาษาที่ได้รับการสนับสนุนโดย Microsoft Copilot บางภาษาอาจมีแนวโน้มที่จะเกิดความแตกต่างในการออกเสียงหรือการจดจํา สําหรับรายการทั้งหมด ให้ดูภาษาที่สนับสนุนสําหรับ Microsoft Copilot
การสนทนาด้วยวิสัยทัศน์ได้รับการประเมินอย่างไร เมตริกใดที่ใช้เพื่อวัดประสิทธิภาพการทํางาน
เพื่อให้มั่นใจในคุณภาพ Copilot จะได้รับคําถามทดสอบ และคําตอบจะได้รับการประเมินผลตามเกณฑ์ต่างๆ เช่น ความเกี่ยวข้อง ความถูกต้อง ความสมบูรณ์ โทนเสียง และการปฏิบัติตามคําแนะนํา เพื่อวัดประสิทธิภาพให้ดียิ่งขึ้น เรายังตรวจสอบการใช้งานฟีเจอร์ อัตราการยกนิ้วโป้ง อัตราการมีส่วนร่วม และคําติชมของผู้ใช้ นอกจากนี้เรายังทําการประเมินความปลอดภัยที่หลากหลายเพื่อให้แน่ใจว่าวิสัยทัศน์ตอบสนองอย่างมีความรับผิดชอบต่อคําถามที่เป็นอันตราย
How do I ให้คําติชมเกี่ยวกับการมองเห็นใน Copilot ได้อย่างไร
คุณสามารถให้คําติชมเมื่อคุณสิ้นสุดการแชทด้วยเสียง คุณควรเห็นไอคอนชูนิ้วโป้งขึ้น/ลงปรากฏในประวัติการแชทของคุณ ซึ่งแชร์กับ Microsoft สําหรับการปรับปรุงฟีเจอร์ เราจะไม่ใช่คําติชมนี้ในการฝึกฝนโมเดลพื้นฐานที่ใช้โดย Copilot