Η Οπτική αναζήτηση στο Microsoft 365 Copilot σάς επιτρέπει να κοινοποιείτε την οθόνη της επιφάνειας εργασίας σας ή την κάμερα του κινητού σας και να ρωτάτε το Copilot για αυτό που βλέπετε, με απαντήσεις που βασίζονται τόσο στο κοινόχρηστο περιεχόμενο όσο και στα δεδομένα της εργασίας σας. Για να αρχίσετε να το χρησιμοποιείτε, ανατρέξτε στο θέμα Γρήγορα αποτελέσματα με την όραση στο Microsoft 365 Copilot.
Πώς λειτουργεί η όραση;
Το Vision μετατρέπει αυτά που μοιράζεστε σε πληροφορίες που μπορεί να αιτιολογήσει το Copilot και, στη συνέχεια, τα συνδυάζει με τα δεδομένα της εργασίας σας για να σας απαντήσει δυνατά.
- Κοινή χρήση οπτικών στοιχείων στη διάρκεια μιας φωνητικής συνομιλίας: την οθόνη της επιφάνειας εργασίας σας (στα Windows ή στο web) ή την κάμερα του κινητού σας.
- Το Copilot μετατρέπει το κοινόχρηστο περιεχόμενο οθόνης ή κάμερας σε δεδομένα που μπορεί να αναλύσει, συμπεριλαμβανομένου κειμένου, εικόνων, γραφημάτων και διασυνδέσεων στην οθόνη.
- Το Copilot θεμελιώνει την αντίδρασή του συνδυάζοντας αυτό που βλέπει με τα δεδομένα της εργασίας σας στο Microsoft 365, όπως έγγραφα, μηνύματα ηλεκτρονικού ταχυδρομείου και προηγούμενες συζητήσεις.
- Το Copilot απαντά φωνητικά σε πραγματικό χρόνο, ώστε να μπορείτε να υποβάλετε ερωτήσεις παρακολούθησης στην ίδια συνομιλία.
Τι μπορεί να κάνει η όραση;
Εδώ είναι μερικά από τα πιο χρήσιμα πράγματα που μπορείτε να κάνετε με την όραση:
- Αναλύστε και εξηγήστε αυτό που βλέπετε. Ζητήστε από το Copilot να ερμηνεύσει γραφήματα, πίνακες, διαφάνειες ή συμπυκνωμένο κείμενο. Για παράδειγμα, "Συνόψισε αυτόν τον πίνακα εργαλείων και επισήμανε τυχόν ανωμαλίες".
- Μετατρέψτε τα σχόλια σε επόμενα βήματα. Κοινοποιήστε μια σελίδα ενός εγγράφου, ενός μηνύματος ηλεκτρονικού ταχυδρομείου ή μιας συνομιλίας και ρωτήστε "Τι σχόλια έλαβα σχετικά με αυτό και ποια είναι τα επόμενα βήματα;"
- Λάβετε μια ενημέρωση κατάστασης έργου. Κοινοποιήστε μια υπηρεσία παρακολούθησης ή ένα στοιχείο εργασίας και ρωτήστε "Δώσε μου μια γρήγορη κατάσταση αυτού του στοιχείου, του τρέχοντος κατόχου και του επόμενου ορόσημου".
- Λάβετε βοήθεια βήμα προς βήμα εντός του πλαισίου. Στρέψτε την κάμερα του τηλεφώνου σας σε ένα σφάλμα συσκευής και ρωτήστε "Πώς γίνεται διορθώσετε αυτό το σφάλμα;"
Ποιοι είναι οι περιορισμοί της όρασης;
- Η Οπτική αναζήτηση είναι διαθέσιμη μόνο μέσω φωνητικών συνομιλιών με το Copilot αυτήν τη στιγμή.
- Η καθημερινή χρήση βασίζεται στη διαθέσιμη χωρητικότητα και προσμετράται στην καθημερινή χρήση φωνής. Θα ειδοποιηθείτε στην εφαρμογή Copilot καθώς πλησιάζετε στη διαθέσιμη χρήση σας.
- Η Οπτική αναζήτηση δεν μπορεί να διαβάσει βίντεο ή κινούμενα γραφικά GIF.
- Η πολύ γρήγορη εναλλαγή μεταξύ παραθύρων κατά την υποβολή μιας ερώτησης μπορεί να προκαλέσει την απόκριση του Copilot με βάση εσφαλμένο περιεχόμενο οθόνης.
- Η όραση δεν μπορεί να αναλάβει δράση ή να χειριστεί άμεσα στοιχεία στην οθόνη σας.
- Το όραμα δεν έχει μακροπρόθεσμη ανάκληση. Δεν επαναχρησιμοποιεί οθόνες ή δεδομένα κάμερας από προηγούμενες περιόδους λειτουργίας.
Σημείωση
Αυτές είναι οι δυνατότητες κατά την εκκίνηση. Οι συνεχιζόμενες βελτιώσεις ενδέχεται να αντιμετωπίσουν ορισμένους από αυτούς τους περιορισμούς με την πάροδο του χρόνου.
Σε τι έχει πρόσβαση η όραση;
Κατά τη διάρκεια μιας ενεργής περιόδου λειτουργίας, το Copilot επεξεργάζεται το περιεχόμενο της οθόνης ή της κάμερας που επιλέγετε να μοιραστείτε, μαζί με τα δεδομένα εργασίας του Microsoft 365 για να θεμελιώσει τις απαντήσεις του, όπως έγγραφα, μηνύματα ηλεκτρονικού ταχυδρομείου, συσκέψεις και προηγούμενες συζητήσεις.
- Η οπτική είσοδος ξεκινά από τον χρήστη και συνδέεται με περίοδο λειτουργίας, επομένως το Copilot λειτουργεί μόνο με περιεχόμενο που έχει τεθεί σε κοινή χρήση κατά τη διάρκεια της ενεργής περιόδου λειτουργίας.
- Το κοινόχρηστο περιεχόμενο οθόνης ή κάμερας επεξεργάζεται ως μια σειρά εικόνων. Τα δεδομένα ήχου και βίντεο αποθηκεύονται προσωρινά για να παρέχετε σχόλια στη Microsoft και διαγράφονται μετά από 48 ώρες.
- Οι απομαγνητοφωνήσεις κειμένου από φωνητικές συνομιλίες αποθηκεύονται και διαχειρίζονται με τον ίδιο τρόπο όπως οι συνομιλίες κειμένου στην εφαρμογή Microsoft 365 Copilot.
- Το Vision συμμορφώνεται με τις δεσμεύσεις επιχειρησιακού επιπέδου της Microsoft για την ασφάλεια των δεδομένων και την προστασία προσωπικών δεδομένων και δεν συνάγει ευαίσθητα προσωπικά χαρακτηριστικά, όπως η φυλή ή το συναίσθημα.
Για περισσότερες πληροφορίες, ανατρέξτε στο θέμα Δεδομένα, προστασία προσωπικών δεδομένων και Ασφάλεια για Microsoft 365 Copilot.
Ποιοι τύποι περιεχομένου υποστηρίζονται;
Η Οπτική αναζήτηση μπορεί να κατανοήσει μια σειρά από περιεχόμενο στην οθόνη και στον πραγματικό κόσμο, όπως:
- Κείμενο, εικόνες, γραφήματα, πίνακες και πίνακες εργαλείων.
- Διεπαφές εφαρμογών και ροές εργασιών πολλών παραθύρων στον υπολογιστή.
- Φυσικά αντικείμενα που προβάλλονται μέσα από την κάμερα του κινητού σας.
Ποιες γλώσσες υποστηρίζονται;
Η Οπτική αναζήτηση είναι διαθέσιμη σε όλες τις γλώσσες που υποστηρίζονται από την Microsoft 365 Copilot. Ορισμένες γλώσσες μπορεί να είναι πιο επιρρεπείς σε διαφορές προφοράς ή αναγνώρισης. Για την πλήρη λίστα, ανατρέξτε στο θέμα Υποστηριζόμενες γλώσσες για Microsoft 365 Copilot.
Πώς αξιολογήθηκαν οι οπτικές συνομιλίες; Ποια μετρικά χρησιμοποιούνται για τη μέτρηση της απόδοσης;
Για να διασφαλιστεί η ποιότητα, δίνονται ερωτήσεις δοκιμής στο Copilot και οι απαντήσεις αξιολογούνται βάσει κριτηρίων όπως η συνάφεια, η ορθότητα, η πληρότητα, ο τόνος και η τήρηση των οδηγιών. Για την καλύτερη μέτρηση των επιδόσεων, εξετάζουμε επίσης τη χρήση δυνατοτήτων, το ποσοστό αποδοχής, το ποσοστό αφοσίωσης και τα σχόλια χρηστών. Διεξάγουμε επίσης ένα ευρύ φάσμα αξιολογήσεων ασφάλειας που διασφαλίζουν ότι η όραση ανταποκρίνεται με υπεύθυνο τρόπο σε επιβλαβή ερωτήματα.
Πώς γίνεται παρέχετε σχόλια σχετικά με το όραμα στο Copilot;
Μπορείτε να παρέχετε σχόλια μόλις τερματίσετε μια φωνητική συνομιλία. Θα πρέπει να δείτε να εμφανίζεται ένας αντίχειρας επάνω/κάτω στο ιστορικό συνομιλίας σας, το οποίο κοινοποιείται στη Microsoft για βελτιώσεις δυνατοτήτων. Δεν χρησιμοποιούμε αυτά τα σχόλια για να εκπαιδεύσουμε τα μοντέλα θεμελίων που χρησιμοποιούνται από το Copilot.