Microsoft Copilot Vision adalah cara baru agar AI bekerja dengan Anda saat Anda menggunakan PC Windows atau Mac, menjelajahi web di Microsoft Edge, atau melihat dunia dari ponsel Anda. Ini bertindak seperti sepasang mata kedua yang dapat memindai, menganalisis, dan menawarkan wawasan berdasarkan apa yang dilihat Copilot. Saat Anda memulai sesi Copilot Vision, Copilot dapat menampilkan layar, aplikasi, halaman, atau umpan kamera seluler yang Anda pilih untuk dibagikan, lalu menggunakan Copilot Voice untuk menjawab pertanyaan dan memandu Anda melalui apa yang Anda lihat.
Catatan
Copilot Vision tidak menggunakan data dari sesi Vision Anda untuk melatih model kami. Data sesi dapat dipertahankan untuk sementara hingga 47 jam untuk mendukung umpan balik yang dikirimkan pengguna dan akan dihapus secara otomatis setelahnya jika tidak ada umpan balik yang dikirimkan. Transkrip percakapan Anda dengan Vision disimpan di riwayat obrolan Anda sehingga Anda dapat mengunjunginya kembali nanti. Riwayat percakapan Anda tidak digunakan untuk pelatihan atau personalisasi, dan Anda dapat menghapusnya kapan saja.
Ketersediaan Copilot Vision dapat bervariasi selama peluncuran. Vision tersedia di semua wilayah dan bahasa yang didukung dan dapat diakses dari Windows, Edge, dan aplikasi seluler Copilot di iOS dan Android. Anda harus berlangganan Microsoft 365 Personal, Family, atau Premium untuk mengakses Copilot Vision.
Cara Copilot Vision menangani data Anda
Copilot Vision hanya aktif saat Anda memulai sesi Vision. Pejabat ini menangani data Anda sesuai dengan Pernyataan Privasi Microsoft.
Saat Anda menggunakan Vision, respons Copilot mungkin dicatat untuk membantu memantau interaksi dan output yang tidak aman. Input pengguna, gambar, audio, dan konten halaman bersama tidak digunakan untuk melatih model atau mempersonalisasi pengalaman Anda. Data sesi dapat dipertahankan untuk sementara hingga 47 jam untuk mendukung umpan balik yang dikirimkan pengguna dan akan dihapus secara otomatis setelahnya jika tidak ada umpan balik yang dikirimkan.
Vision tidak berinteraksi langsung dengan PC, web, atau ponsel atas nama Anda. Itu ada untuk menjawab pertanyaan dan membimbing Anda, bukan untuk mengambil tindakan untuk Anda. Copilot Vision mungkin menyoroti bagian layar untuk membantu Anda menemukan informasi yang relevan, tetapi tidak mengeklik, memasukkan teks, atau menggulir atas nama Anda.
Saat pertama kali menggunakan Vision di Windows, macOS, Edge, atau Copilot seluler, Copilot akan meminta Anda untuk mengakui pemberitahuan privasi.
Vision tersedia untuk pengguna komersial yang masuk dengan ID Entra mereka di aplikasi web dan seluler Copilot.
Menggunakan Copilot Vision di Windows
Copilot Vision memungkinkan Anda berbagi jendela atau aplikasi browser tertentu dengan Copilot selama sesi aktif. Copilot dapat menjawab pertanyaan tentang apa yang Anda pilih untuk dibagikan dan memberikan panduan langkah demi langkah.
Saat sesi Vision aktif, Copilot dapat menjawab pertanyaan tentang aplikasi atau jendela browser yang telah Anda bagikan, meskipun jendela tidak lagi terbuka di depan Anda. Ketika sesi Vision berakhir, Copilot segera berhenti mengamati konten yang Anda bagikan, dan konteks bersama tidak lagi tersedia untuk sesi Vision aktif.
Copilot Vision berfungsi dengan aplikasi apa pun di Windows. Namun, jika konten berisi materi berbahaya atau dilindungi DRM, Copilot tidak dapat menganalisisnya.
Untuk menggunakan Copilot Vision di Windows:
- Mulai panggilan Suara di Copilot. Penglihatan nonaktif secara default.
- Untuk menambahkan Vision ke sesi Suara, pilih Bagikan layar.
- Pilih layar atau aplikasi yang ingin Anda bagikan dengan Copilot. Saat Copilot Vision aktif, Anda akan melihat kerangka di sekitar layar atau aplikasi bersama. Anda dapat berbagi hingga dua aplikasi sekaligus.
- Pastikan mikrofon dan audio Anda diaktifkan. Copilot Vision menggunakan input dan output suara untuk menjawab pertanyaan tentang konten yang Anda bagikan.
- Toolbar mengambang muncul dengan kontrol Visual dan Suara. Copilot akan menyapa Anda, dan Anda dapat mulai mengajukan pertanyaan tentang konten yang dibagikan.
- Untuk mematikan suara Anda, pilih ikon mikrofon
. Ini menghentikan Copilot mendengarkan. Pilih ikon mikrofon lagi untuk melanjutkan. - Untuk mengakhiri sesi Penglihatan, pilih Berhenti di bilah alat mengambang. Ketika sesi berakhir, Copilot segera berhenti mengamati konten yang dibagikan.
Menggunakan Copilot Vision di Edge
Copilot Vision berfungsi dengan sebagian besar situs dan halaman, kecuali yang berisi konten berbahaya atau dewasa. Saat Anda mengunjungi situs yang tidak didukung Copilot Vision, komposer Copilot di bagian bawah layar akan menampilkan ikon berwarna abu-abu, dan Copilot tidak akan mendiskusikan konten halaman.
Untuk menggunakan Copilot Vision di Edge:
- Masuk ke Edge dengan akun Microsoft pribadi Anda.
- Pilih ikon Copilot di toolbar Edge.
- Pilih tombol Suara (gelombang)
. - Mulai sesi Suara dengan Copilot.
- Pilih Bagikan layar untuk menambahkan Visual ke sesi Suara.
- Buka situs web, video, atau PDF yang didukung yang ingin Anda tanyakan kepada Copilot. Saat Anda menggunakan Vision, toolbar di panel samping Copilot memberi tahu Anda bahwa sesi Vision Anda aktif. Visi tetap bersama Anda saat Anda menelusuri dari satu halaman ke halaman lain hingga Anda siap untuk mengakhiri sesi.
- Ajukan pertanyaan pada Copilot tentang halaman atau konten yang Anda lihat.
- Untuk menghentikan sesi, pilih X di toolbar di bagian bawah jendela Copilot, tutup panel samping Copilot, atau keluar dari Edge.
Menggunakan Copilot Vision di perangkat seluler
Catatan
Fitur Mobile Vision akan segera diluncurkan. Penglihatan Seluler dan berbagi layar diaktifkan secara bertahap di perangkat iOS dan Android, sehingga ketersediaan dapat bervariasi menurut pengguna selama peluncuran.
Anda dapat mengakses Copilot Vision di aplikasi seluler Copilot di perangkat iOS dan Android. Copilot Vision menjawab pertanyaan berdasarkan apa yang dilihatnya melalui perangkat seluler, kamera, atau layar Anda.
Untuk menggunakan Copilot Vision di perangkat seluler:
- Di aplikasi seluler Copilot, mulai sesi Suara dengan Copilot, lalu pilih Bagikan layar. Tindakan ini akan memulai kamera perangkat seluler Anda.
- Anda perlu memberikan izin kepada aplikasi Copilot untuk mengakses kamera perangkat Anda untuk menggunakan fitur ini.
- Bicaralah dengan Copilot dan ajukan pertanyaan tentang apa yang Anda lihat melalui kamera atau di layar Anda. Copilot Vision tetap aktif hingga Anda mengakhiri sesi Vision.
- Untuk mengakhiri sesi Copilot Vision, pilih X.