- Copilot Visi tiba di Android dan memungkinkan Anda berinteraksi dengan lingkungan menggunakan kamera ponsel.
- Fitur baru ini mengintegrasikan analisis visual waktu nyata dan pembacaan konten di layar.
- Copilot Vision adalah bagian dari serangkaian delapan pembaruan utama asisten Microsoft.
- Tersedia di aplikasi Copilot untuk Android dan iOS, dengan fungsi yang diperluas di Windows.
Microsoft telah memperkenalkan fitur visual baru pada asisten AI -nya , Copilot, yang disebut Copilot Vision, yang kini tersedia di perangkat Android . Fitur ini memungkinkan asisten untuk menginterpretasikan apa yang dilihat pengguna melalui kamera atau apa yang muncul di layar ponsel, sehingga memperluas kemungkinan untuk berinteraksi dengan teknologi dengan cara yang lebih alami dan intuitif.
Dengan implementasi ini, Copilot menyelaraskan diri dengan tren asisten digital yang melampaui keyboard , memperkenalkan kemampuan multimodal yang memungkinkannya untuk menginterpretasikan gambar, video, dan konten visual langsung. Fitur ini tidak hanya menandai langkah penting bagi AI seluler Microsoft , tetapi juga secara langsung bersaing dengan penawaran serupa dari perusahaan seperti Google , khususnya sistem Gemini Live-nya. Untuk mempelajari lebih lanjut tentang hal ini, Anda dapat membaca artikel tentang Jules, AI Google.
Apa itu Copilot Vision dan bagaimana cara kerjanya?
Copilot Vision adalah fitur yang memungkinkan asisten Microsoft untuk mengamati melalui kamera ponsel atau menafsirkan apa yang ditampilkan di layar, memberikan bantuan kontekstual secara real-time . Mulai dari menganalisis gambar yang tersimpan hingga menafsirkan video langsung, Copilot kini dapat berinteraksi dengan lingkungan visual pengguna secara lebih langsung.
Sebagai contoh, pengguna dapat mengarahkan kamera mereka ke tanaman, dan Copilot akan dapat mengidentifikasi spesiesnya dan menawarkan rekomendasi perawatan . Dimungkinkan juga untuk mengarahkan kamera ke ruangan di rumah dan menerima saran dekorasi, menjadikan asisten ini alat yang berguna untuk banyak aktivitas sehari-hari. Hal ini dilengkapi dengan peningkatan kustomisasi saran Copilot, seperti yang dijelaskan secara rinci dalam Mengkustomisasi Saran dengan GitHub Copilot.
Pada perangkat Android, fitur ini tersedia melalui aplikasi Copilot resmi , meskipun akses penuh saat ini terbatas pada pelanggan Copilot Pro di negara-negara tertentu. Namun, teknologi ini telah diaktifkan secara bertahap di beberapa perangkat dan ketersediaannya diharapkan akan segera meluas.
Pengalaman visual juga di Windows
Selain perangkat seluler, Copilot Vision juga telah diintegrasikan ke dalam Windows sebagai bagian dari aplikasi Copilot asli yang baru . Versi asisten ini dapat membaca apa yang ada di layar saat pengguna bekerja dengan berbagai aplikasi atau dokumen.
Fitur ini mendeteksi jendela aktif, menginterpretasikan konten web atau dokumen yang terbuka, dan memungkinkan Anda berinteraksi langsung dengannya . Jadi, jika Anda sedang mengedit presentasi atau menavigasi halaman web yang kompleks, Copilot dapat membantu Anda memahami grafik, mengatur ulang konten, atau bahkan melakukan tugas tanpa beralih jendela . Kemampuan analitis Copilot serupa dengan Copilot Vision yang baru, yang merevolusi penjelajahan web.
Untuk mengakses fungsi ini dengan cepat di komputer, cukup tekan kombinasi tombol Alt + Space . Interaksi suara juga tersedia dengan menekan dan menahan kombinasi tombol yang sama selama dua detik.
Copilot Vision dan Kompetisi: AI Visual Real-Time
Kehadiran Copilot Vision di Android bertepatan dengan peluncuran fitur serupa di asisten suara dari perusahaan teknologi besar lainnya . Google, misalnya, baru-baru ini memamerkan Gemini Live, yang juga memungkinkan analisis waktu nyata dari apa yang dilihat melalui kamera perangkat.
Kedua proposal tersebut berfokus pada pengalaman multimodal di perangkat seluler , tetapi Microsoft membedakan dirinya dengan integrasi langsung ke Windows dan ekosistem yang terkonsolidasi di sekitar Copilot. Strategi ini bertujuan untuk menjadikan asisten tersebut sebagai pusat utama untuk produktivitas, pengorganisasian, dan dukungan sehari-hari, seperti yang disebutkan dalam analisis tentang pergeseran yang akan segera terjadi dalam cara mencari informasi.
Mulai dari konsultasi konten web hingga membantu tugas visual sehari-hari , Copilot Vision bertujuan untuk mencakup berbagai macam penggunaan, menghilangkan hambatan antara dunia digital dan fisik.
Fitur Copilot lainnya ditingkatkan dengan pembaruan
Pembaruan yang memperkenalkan Copilot Vision adalah bagian dari serangkaian peningkatan yang lebih luas yang baru-baru ini ditambahkan Microsoft ke asisten AI-nya . Secara total, Copilot telah menerima delapan fitur utama yang memperluas kegunaannya sehari-hari:
- Memori: memungkinkan Copilot mengingat preferensi, kebiasaan atau tanggal penting, selalu dengan opsi untuk sesuaikan tingkat privasi.
- tindakan: AI dapat melakukan tugas untuk Anda, seperti membeli tiket, membuat reservasi, atau mengirimkan hadiah.
- Pages: alat untuk menciptakan ruang kerja yang terorganisasi dan visual tempat Anda dapat mengekspresikan ide atau mengelola proyek.
- Podcast: menghasilkan konten audio berdasarkan minat atau topik yang dipilih pengguna.
- Penelitian Mendalam: memungkinkan Anda melakukan penelitian kompleks, menganalisis dokumen dan sumber daring.
- tas: membantu Anda membandingkan produk, melacak harga, dan secara otomatis menemukan penawaran.
- Cari : Pengalaman pencarian yang ditingkatkan di Bing dengan jawaban generatif dan referensi yang jelas.
Alat-alat ini memposisikan Copilot sebagai platform bantuan serbaguna , melampaui percakapan suara atau teks sederhana. Dengan Vision sebagai pelengkap visual, ekosistem ini dilengkapi dengan antarmuka yang lebih kaya dan lebih terhubung dengan lingkungan dunia nyata. Untuk mempelajari lebih lanjut tentang kemampuan Copilot, saya mengundang Anda untuk membaca artikel tentang Microsoft Security Copilot dan AI Agents.
Privasi, kontrol, dan ketersediaan
Microsoft telah menekankan pentingnya privasi dalam fitur-fitur baru ini , meyakinkan pengguna bahwa mereka memiliki kendali penuh atas informasi apa yang disimpan atau diingat. Melalui panel pengaturan, pengguna dapat mengaktifkan, membatasi, atau menonaktifkan fitur seperti Memori, serta mengelola izin akses kamera dan konten visual.
Dalam kasus Copilot Vision, akses kamera tidak konstan ; akses hanya diaktifkan ketika pengguna secara eksplisit mengizinkannya. Dengan cara ini, perusahaan bertujuan untuk menghindari kebingungan dengan fitur lain seperti Recall—yang saat ini masih dalam versi beta—yang mengambil foto otomatis untuk digunakan di kemudian hari.
Saat ini, Copilot Vision tersedia dalam fase awal untuk pengguna Android dan iOS yang menggunakan aplikasi seluler Copilot . Di Windows, fitur ini harus diinstal secara manual atau pengguna harus menunggu peluncuran bertahap ke saluran Insider. Microsoft telah mengkonfirmasi bahwa mereka akan mengaktifkannya berdasarkan wilayah, tingkat langganan, dan platform.
Dengan integrasi visi komputer dan pembaca layar, Copilot mengambil langkah selanjutnya dalam transformasinya menjadi asisten digital yang benar-benar lengkap . Potensinya tidak terbatas pada menjawab pertanyaan atau menjalankan perintah sederhana ; ia mulai menafsirkan dunia seperti yang dilakukan pengguna.
Mulai dari mengidentifikasi objek sehari-hari dan membantu proyek akademis hingga mendukung tugas profesional, proposal ini bertujuan untuk menghadirkan AI ke berbagai penggunaan pribadi dan fungsional yang lebih luas . Semua ini hadir dengan kontrol privasi yang jelas, opsi penyesuaian, dan peluncuran yang terintegrasi dengan mulus ke dalam ekosistem Microsoft.
Kehadiran Copilot Vision di Android tidak hanya menambah alat visual lain ke dalam naungan AI sehari-hari: ia mendefinisikan ulang cara kita berinteraksi dengan perangkat dan dunia fisik, dengan menggabungkan perspektif teknologi yang menafsirkan, membantu, dan belajar dalam waktu nyata.
Penulis yang bersemangat tentang dunia byte dan teknologi secara umum. Saya suka berbagi ilmu melalui tulisan, dan itulah yang akan saya lakukan di blog ini, menunjukkan kepada Anda semua hal paling menarik tentang gadget, perangkat lunak, perangkat keras, tren teknologi, dan banyak lagi. Tujuan saya adalah membantu Anda menavigasi dunia digital dengan cara yang sederhana dan menghibur.