วิสัยทัศน์ใน Microsoft 365 Copilot ทํางานอย่างไร

วิสัยทัศน์ใน Microsoft 365 Copilot ช่วยให้คุณสามารถแชร์หน้าจอเดสก์ท็อปหรือกล้องมือถือของคุณและสอบถาม Copilot เกี่ยวกับสิ่งที่คุณเห็น ด้วยคําตอบที่อยู่ในเนื้อหาที่แชร์และข้อมูลงานของคุณ เมื่อต้องการเริ่มต้นใช้งาน ให้ดูที่ เริ่มต้นใช้งานการมองเห็นใน Microsoft 365 Copilot

วิสัยทัศน์ทํางานอย่างไร

วิสัยทัศน์เปลี่ยนสิ่งที่คุณแบ่งปันเป็นข้อมูล Copilot สามารถให้เหตุผลต่อไปได้ จากนั้นรวมเข้ากับข้อมูลงานของคุณเพื่อตอบคุณออกมาดังๆ

  • คุณแชร์การป้อนข้อมูลด้วยภาพระหว่างการสนทนาด้วยเสียง: หน้าจอเดสก์ท็อป (บน Windows หรือเว็บ) หรือกล้องเคลื่อนที่ของคุณ
  • Copilot จะแปลงเนื้อหาหน้าจอหรือกล้องที่แชร์เป็นข้อมูลที่สามารถวิเคราะห์ได้ รวมถึงข้อความ รูปภาพ แผนภูมิ และส่วนติดต่อบนหน้าจอ
  • Copilot ให้คําตอบโดยการรวมสิ่งที่เห็นเข้ากับข้อมูลงาน Microsoft 365 ของคุณ เช่น เอกสาร อีเมล และการอภิปรายก่อนหน้านี้
  • Copilot ตอบคําถามด้วยเสียงแบบเรียลไทม์ เพื่อให้คุณสามารถถามคําถามติดตามผลในการสนทนาเดียวกัน

วิสัยทัศน์สามารถทําอะไรได้บ้าง

ต่อไปนี้คือสิ่งที่มีประโยชน์ที่สุดบางประการที่คุณสามารถทําได้ด้วยการมองเห็น:

  • วิเคราะห์และอธิบายสิ่งที่คุณกําลังดูอยู่ ขอให้ Copilot ตีความแผนภูมิ ตาราง สไลด์ หรือข้อความหนาแน่น ตัวอย่างเช่น "สรุปแดชบอร์ดนี้และเน้นความผิดปกติใดๆ"
  • เปลี่ยนคําติชมเป็นขั้นตอนถัดไป แชร์หน้าของเอกสาร อีเมล หรือการแชท และถามว่า "ฉันได้รับคําติชมอะไรเกี่ยวกับสิ่งนี้ และขั้นตอนถัดไปของฉันคืออะไร"
  • รับการอัปเดตสถานะโครงการ แชร์ตัวติดตามหรือรายการงาน และถามว่า "ให้สถานะด่วนของรายการนี้ เจ้าของปัจจุบัน และหลักเป้าหมายถัดไปให้ฉัน"
  • รับความช่วยเหลือทีละขั้นตอนในบริบท ชี้กล้องโทรศัพท์ของคุณไปที่ข้อผิดพลาดของอุปกรณ์ และถามว่า "How do I แก้ไขข้อผิดพลาดนี้หรือไม่"

ข้อจํากัดด้านการมองเห็นคืออะไร

  • กล้องจะพร้อมใช้งานผ่านการแชทด้วยเสียงกับ Copilot เท่านั้นในขณะนี้
  • การใช้งานประจําวันขึ้นอยู่กับความจุที่พร้อมใช้งานและนับรวมอยู่ในการใช้งานเสียงประจําวันของคุณ คุณจะได้รับการแจ้งเตือนในแอป Copilot เมื่อคุณเข้าใกล้การใช้งานที่พร้อมใช้งานของคุณ
  • ค้นหาด้วยกล้องไม่สามารถอ่านวิดีโอหรือ GIF แบบเคลื่อนไหวได้
  • การสลับไปมาระหว่างหน้าต่างเร็วเกินไปในขณะที่ถามคําถามอาจทําให้ Copilot ตอบกลับโดยยึดตามเนื้อหาหน้าจอที่ไม่ถูกต้อง
  • ค้นหาด้วยกล้องไม่สามารถดําเนินการหรือจัดการรายการต่างๆ บนหน้าจอของคุณโดยตรง
  • วิสัยทัศน์ไม่มีการเรียกคืนในระยะยาว ซึ่งจะไม่นําหน้าจอหรืออินพุตกล้องจากเซสชันก่อนหน้ามาใช้ใหม่

หมายเหตุ

ความสามารถเหล่านี้สามารถเปิดใช้งานได้ การปรับปรุงอย่างต่อเนื่องอาจแก้ไขข้อจํากัดบางอย่างเหล่านี้เมื่อเวลาผ่านไป

วิสัยทัศน์สามารถเข้าถึงอะไรได้บ้าง

ในระหว่างเซสชันที่ใช้งานอยู่ Copilot จะประมวลผลเนื้อหาหน้าจอหรือกล้องที่คุณเลือกที่จะแชร์ พร้อมกับข้อมูลงาน Microsoft 365 ของคุณเพื่อสร้างคําตอบ เช่น เอกสาร อีเมล การประชุม และการอภิปรายก่อนหน้า

  • การป้อนข้อมูลด้วยภาพเป็นการเริ่มต้นโดยผู้ใช้และขอบเขตเซสชัน ดังนั้น Copilot จะทํางานกับเนื้อหาที่แชร์ระหว่างเซสชันที่ใช้งานอยู่เท่านั้น
  • เนื้อหาหน้าจอหรือกล้องที่แชร์จะถูกประมวลผลเป็นชุดรูปภาพ ข้อมูลเสียงและวิดีโอจะถูกจัดเก็บไว้ชั่วคราวเพื่อให้คุณส่งคําติชมไปยัง Microsoft และจะถูกลบหลังจาก 48 ชั่วโมง
  • สําเนาบทสนทนาข้อความจากการสนทนาด้วยเสียงจะถูกจัดเก็บและจัดการในลักษณะเดียวกับการสนทนาด้วยข้อความในแอป Microsoft 365 Copilot
  • วิสัยทัศน์เป็นไปตามพันธกิจระดับองค์กรของ Microsoft ที่มีต่อความปลอดภัยและความเป็นส่วนตัวของข้อมูล และจะไม่ละเมิดคุณลักษณะส่วนบุคคลที่ละเอียดอ่อน เช่น การแข่งขันหรืออารมณ์

สําหรับข้อมูลเพิ่มเติม ให้ดู ข้อมูล ความเป็นส่วนตัว และความปลอดภัยสําหรับ Microsoft 365 Copilot

เนื้อหาชนิดใดบ้างที่ได้รับการสนับสนุน

วิสัยทัศน์สามารถเข้าใจเนื้อหาบนหน้าจอและในโลกแห่งความเป็นจริงรวมถึง:

  • ข้อความ รูปภาพ แผนภูมิ ตาราง และแดชบอร์ด
  • ส่วนติดต่อของแอปและเวิร์กโฟลว์แบบหลายหน้าต่างบนเดสก์ท็อป
  • วัตถุทางกายภาพที่ดูผ่านกล้องเคลื่อนที่ของคุณ

ภาษาใดบ้างที่ได้รับการสนับสนุน

ค้นหาด้วยกล้องพร้อมใช้งานในทุกภาษาที่ Microsoft 365 Copilot รองรับ บางภาษาอาจมีแนวโน้มที่จะมีความแตกต่างด้านการออกเสียงหรือการรู้จํา สําหรับรายการทั้งหมด โปรดดู ภาษาที่รองรับสําหรับ Microsoft 365 Copilot

การสนทนาด้วยภาพได้รับการประเมินอย่างไร เมตริกใดที่ใช้เพื่อวัดประสิทธิภาพการทํางาน

เพื่อให้มั่นใจในคุณภาพ Copilot จะได้รับคําถามทดสอบและการตอบสนองจะได้รับการประเมินตามเกณฑ์เช่นความเกี่ยวข้องความถูกต้องความสมบูรณ์เสียงและการยึดเกาะการเรียนการสอน เพื่อให้สามารถวัดประสิทธิภาพได้ดียิ่งขึ้น เรายังได้ตรวจสอบการใช้งานฟีเจอร์ อัตราการยกนิ้วโป้ง อัตราการมีส่วนร่วม และคําติชมจากผู้ใช้ เรายังทําการประเมินความปลอดภัยที่หลากหลายเพื่อให้แน่ใจว่าวิสัยทัศน์ตอบสนองอย่างมีความรับผิดชอบต่อคําสืบค้นที่เป็นอันตราย

How do I ให้คําติชมเกี่ยวกับวิสัยทัศน์ใน Copilot หรือไม่

คุณสามารถให้คําติชมเมื่อคุณสิ้นสุดการแชทด้วยเสียง คุณควรเห็นนิ้วโป้งขึ้น/ลงปรากฏในประวัติการแชทของคุณซึ่งแชร์กับ Microsoft สําหรับการปรับปรุงฟีเจอร์ เราไม่ใช้คําติชมนี้ในการฝึกโมเดลพื้นฐานที่ Copilot ใช้

วิธีอื่นๆ ในการทํางานกับวิสัยทัศน์ใน Copilot