تتيح لك الرؤية في Microsoft 365 Copilot مشاركة شاشة سطح المكتب أو كاميرا الجوال واسأل Copilot عما تراه، مع إجابات قائمة على كل من المحتوى المشترك وبيانات عملك. لبدء استخدامه، راجع بدء استخدام الرؤية في Microsoft 365 Copilot.
كيف تعمل الرؤية؟
تحول الرؤية ما تشاركه إلى معلومات يمكن أن يعقلها Copilot، ثم تجمعها مع بيانات العمل الخاصة بك للرد عليك بصوت عال.
- يمكنك مشاركة الإدخال المرئي أثناء محادثة صوتية: شاشة سطح المكتب (على Windows أو الويب) أو كاميرا الجوال.
- يحول Copilot محتوى الشاشة أو الكاميرا المشتركة إلى بيانات يمكنه تحليلها، بما في ذلك النص والصور والمخططات والواجهات على الشاشة.
- تؤسس Copilot استجابتها من خلال الجمع بين ما تراه مع بيانات عمل Microsoft 365، مثل المستندات ورسائل البريد الإلكتروني والمناقشات السابقة.
- يجيب Copilot عن طريق الصوت في الوقت الحقيقي، حتى تتمكن من طرح أسئلة المتابعة في نفس المحادثة.
ما الذي يمكن أن تفعله الرؤية؟
فيما يلي بعض الأشياء الأكثر فائدة التي يمكنك القيام بها مع الرؤية:
- تحليل وشرح ما تنظر إليه. اطلب من Copilot تفسير المخططات أو الجداول أو الشرائح أو النص الكثيف. على سبيل المثال، "تلخيص لوحة المعلومات هذه وتمييز أي حالات شاذة."
- تحويل الملاحظات إلى خطوات تالية. شارك صفحة من مستند أو بريد إلكتروني أو دردشة واسأل، "ما هي الملاحظات التي تلقيتها حول هذا الموضوع، وما هي خطواتي التالية؟"
- الحصول على تحديث حالة المشروع. شارك متعقبا أو عنصر عمل واسأل، "أعطني حالة سريعة لهذا العنصر والمالك الحالي والحدث الرئيسي التالي."
- الحصول على تعليمات في السياق خطوة بخطوة. أشر بكاميرا هاتفك إلى خطأ في الجهاز واسأل، "كيف أعمل إصلاح هذا الخطأ؟"
ما هي قيود الرؤية؟
- الرؤية متاحة فقط من خلال الدردشات الصوتية مع Copilot الآن.
- يعتمد الاستخدام اليومي على السعة المتوفرة ويحسب حسب استخدامك الصوتي اليومي. سيتم إعلامك في تطبيق Copilot أثناء اقترابك من استخدامك المتاح.
- يتعذر على Vision قراءة مقاطع الفيديو أو صور GIF المتحركة.
- قد يؤدي التبديل بين النوافذ بسرعة كبيرة أثناء طرح سؤال إلى استجابة Copilot استنادا إلى محتوى الشاشة الخطأ.
- لا يمكن للرؤية اتخاذ إجراء أو معالجة العناصر مباشرة على الشاشة.
- الرؤية ليس لديها استدعاء طويل الأجل. لا يعيد استخدام الشاشات أو إدخال الكاميرا من جلسات العمل السابقة.
ملاحظة
هذه هي القدرات عند الإطلاق. قد تعالج التحسينات الجارية بعض هذه القيود بمرور الوقت.
ما الذي يمكن للرؤية الوصول إليه؟
أثناء جلسة عمل نشطة، يعالج Copilot محتوى الشاشة أو الكاميرا الذي تختار مشاركته، جنبا إلى جنب مع بيانات عمل Microsoft 365 لاستخلاص إجاباته، مثل المستندات ورسائل البريد الإلكتروني والاجتماعات والمناقشات السابقة.
- يتم بدء الإدخال المرئي من قبل المستخدم ومرتبط بالجلسة، لذلك يعمل Copilot فقط مع المحتوى المشترك أثناء الجلسة النشطة.
- تتم معالجة محتوى الشاشة أو الكاميرا المشتركة كسلسلة من الصور. يتم تخزين بيانات الصوت والفيديو مؤقتا لتقديم ملاحظات إلى Microsoft ويتم حذفها بعد 48 ساعة.
- يتم تخزين النسخ النصية من المحادثات الصوتية وإدارتها بنفس الطريقة التي يتم بها تخزين المحادثات النصية في تطبيق Microsoft 365 Copilot.
- تلتزم Vision بالتزامات Microsoft على مستوى المؤسسة لأمن البيانات والخصوصية، ولا تستنتج سمات شخصية حساسة مثل العرق أو المشاعر.
لمزيد من المعلومات، راجع البيانات والخصوصية والأمان Microsoft 365 Copilot.
ما أنواع المحتوى المعتمدة؟
يمكن للرؤية فهم مجموعة من المحتوى على الشاشة والعالم الحقيقي، بما في ذلك:
- النص والصور والمخططات والجداول ولوحات المعلومات.
- واجهات التطبيق وسير العمل متعدد النوافذ على سطح المكتب.
- الكائنات المادية التي يتم عرضها من خلال كاميرا الجوال الخاصة بك.
ما هي اللغات المدعومة؟
الرؤية متاحة بجميع اللغات التي تدعمها Microsoft 365 Copilot. قد تكون بعض اللغات أكثر عرضة للنطق أو اختلافات التعرف. للحصول على القائمة الكاملة، راجع اللغات المدعومة Microsoft 365 Copilot.
كيف تم تقييم محادثات الرؤية؟ ما هي المقاييس المستخدمة لقياس الأداء؟
لضمان الجودة، يتم إعطاء Copilot أسئلة اختبارية، ويتم تقييم استجاباتها بناء على معايير مثل الصلة والتصحيح والاكتمال والنغمة والالتزام بالإرشادات. لقياس الأداء بشكل أفضل، نراجع أيضا استخدام الميزات ومعدل الإبهام ومعدل التفاعل وملاحظات المستخدم. كما نقوم بإجراء مجموعة واسعة من تقييمات السلامة التي تضمن استجابة الرؤية بطريقة مسؤولة للاستعلامات الضارة.
كيف أعمل تقديم ملاحظات حول الرؤية في Copilot؟
يمكنك تقديم الملاحظات بمجرد إنهاء دردشة صوتية. يجب أن تشاهد إبهام يظهر لأعلى/لأسفل في محفوظات الدردشة التي تتم مشاركتها مع Microsoft لتحسين الميزات. لا نستخدم هذه الملاحظات لتدريب نماذج الأساس التي يستخدمها Copilot.