Microsoft Copilot Vision è un nuovo modo per far lavorare l'intelligenza artificiale con te mentre usi il tuo PC Windows o Mac, navighi sul Web in Microsoft Edge o visualizzi il mondo dal tuo telefono. Agisce come un secondo paio di occhi in grado di scansionare, analizzare e offrire approfondimenti in base a ciò che vede Copilot. Quando avvii una sessione di Copilot Vision, Copilot può visualizzare lo schermo, l'app, la pagina o il feed della videocamera per dispositivi mobili che scegli di condividere, quindi usare Copilot Voice per rispondere alle domande e guidarti attraverso ciò che vedi.
Nota
Copilot Vision non usa i dati della sessione di visione per addestrare i modelli. I dati della sessione possono essere conservati temporaneamente per un massimo di 47 ore per supportare il feedback inviato dall'utente e vengono eliminati automaticamente in seguito se non viene inviato alcun feedback. Una trascrizione della conversazione con Visione viene salvata nella cronologia della chat in modo da poterla rivedere in seguito. La cronologia delle conversazioni non viene usata per la formazione o la personalizzazione ed è possibile eliminarla in qualsiasi momento.
La disponibilità di Copilot Vision potrebbe variare durante l'implementazione. Vision è disponibile in tutte le aree geografiche e lingue supportate ed è accessibile da Windows, Edge e dall'app per dispositivi mobili Copilot su iOS e Android. Per accedere a Copilot Vision, è necessario abbonarsi a Microsoft 365 Personal, Family o Premium.
In che modo Copilot Vision gestisce i dati
Copilot Vision è attivo solo quando avvii una sessione di Vision. Gestisce i dati dell'utente in conformità all'Informativa sulla privacy di Microsoft.
Quando usi Vista, le risposte di Copilot possono essere registrate per monitorare interazioni e output non sicuri. Gli input dell'utente, le immagini, l'audio e il contenuto delle pagine condivise non vengono usati per addestrare modelli o personalizzare l'esperienza. I dati della sessione possono essere conservati temporaneamente per un massimo di 47 ore per supportare il feedback inviato dall'utente e vengono eliminati automaticamente in seguito se non viene inviato alcun feedback.
Visione non interagisce direttamente con il PC, il Web o il telefono per conto dell'utente. È lì per rispondere alle domande e guidarti, non per intraprendere azioni per te. Copilot Vision potrebbe evidenziare parti dello schermo per aiutarti a trovare informazioni pertinenti, ma non fa clic, non immette testo o scorre per tuo conto.
La prima volta che usi Vision in Windows, macOS, Edge o Copilot mobile, Copilot ti chiederà di confermare un'informativa sulla privacy.
Vision è disponibile per gli utenti commerciali che hanno eseguito l'accesso con il proprio ID Entra nelle app web e mobile di Copilot.
Usa Copilot Vision in Windows
Copilot Vision consente di condividere finestre del browser o app selezionate con Copilot durante una sessione attiva. Copilot può rispondere a domande su ciò che scegli di condividere e fornire indicazioni dettagliate.
Mentre è attiva una sessione di Vision, Copilot può rispondere a domande sull'app o sulle finestre del browser che hai condiviso, anche se non sono più aperte davanti a te. Al termine della sessione di Visione, Copilot interrompe immediatamente l'osservazione del contenuto condiviso e il contesto condiviso non è più disponibile per la sessione di Visione attiva.
Copilot Vision funziona con qualsiasi app in Windows. Tuttavia, se il contenuto include materiale dannoso o protetto da DRM, Copilot non può analizzarlo.
Per usare Copilot Vision in Windows:
- Avvia una chiamata vocale in Copilot. Visualizzazione è disattivata per impostazione predefinita.
- Per aggiungere Visione alla sessione Voce, seleziona Condividi schermo.
- Seleziona lo schermo o l'app che vuoi condividere con Copilot. Quando Copilot Vision è attivo, viene visualizzato un contorno intorno allo schermo o all'app condivisa. È possibile condividere fino a due app alla volta.
- Assicurati che il microfono e l'audio siano abilitati. Copilot Vision usa l'input e l'output vocale per rispondere alle domande sui contenuti condivisi.
- Viene visualizzata una barra degli strumenti mobile con comandi visivi e vocali. Copilot ti accoglierà e potrai iniziare a porre domande sul contenuto condiviso.
- Per disattivare l'audio, selezionare l'icona del microfono
. Questo impedisce a Copilot di ascoltare. Seleziona di nuovo l'icona del microfono per riprendere. - Per terminare la sessione di Visione, seleziona Interrompi nella barra degli strumenti mobile. Al termine della sessione, Copilot interrompe immediatamente l'osservazione del contenuto condiviso.
Usa Copilot Vision in Edge
Copilot Vision funziona con la maggior parte dei siti e delle pagine, ad eccezione di quelle che contengono contenuti dannosi o per adulti. Quando visiti un sito non supportato da Copilot Vision, il compositore Copilot nella parte inferiore dello schermo mostrerà un'icona disattivata e Copilot non discuterà il contenuto della pagina.
Per usare Copilot Vision in Edge:
- Accedi a Edge con il tuo account Microsoft personale.
- Seleziona l'icona Copilot nella barra degli strumenti di Microsoft Edge.
- Selezionare il pulsante Voce (onde)
. - Avvia una sessione vocale con Copilot.
- Seleziona Condividi schermo per aggiungere Visione alla sessione Voce.
- Vai a qualsiasi sito Web, video o PDF supportato su cui vuoi chiedere informazioni a Copilot. Quando usi Vista, una barra degli strumenti nel riquadro laterale di Copilot ti informa che la sessione di Visione è attiva. Vision rimane con te mentre navighi da una pagina all'altra finché non sei pronto per terminare la sessione.
- Fai domande a Copilot sulla pagina o sul contenuto che stai visualizzando.
- Per interrompere la sessione, seleziona X nella barra degli strumenti nella parte inferiore della finestra di Copilot, chiudi il riquadro laterale di Copilot o esci da Edge.
Usa Copilot Vision su dispositivi mobili
Nota
Le funzionalità di Visione mobile verranno implementate a breve. Visione mobile e condivisione dello schermo vengono abilitate gradualmente nei dispositivi iOS e Android, quindi la disponibilità potrebbe variare in base all'utente durante l'implementazione.
Puoi accedere a Copilot Vision nell'app per dispositivi mobili Copilot sia su dispositivi iOS che Android. Copilot Vision risponde alle domande in base a ciò che vede attraverso il dispositivo mobile, la fotocamera o lo schermo.
Per usare Copilot Vision su dispositivi mobili:
- Nell'app per dispositivi mobili Copilot, avvia una sessione vocale con Copilot, quindi seleziona Condividi schermo. In questo modo si avvierà la fotocamera del dispositivo mobile.
- Per usare questa funzionalità, è necessario concedere all'app Copilot l'autorizzazione ad accedere alla fotocamera del dispositivo.
- Parla con Copilot e fai domande su ciò che vedi attraverso la fotocamera o sullo schermo. Copilot Vision rimane attivo fino al termine della sessione Vision.
- Per terminare la sessione di Copilot Vision, selezionare X.