Google Pamer “Magic Pointer”, Kursor AI yang Bisa Memahami Isi Layar

- Divisi kecerdasan buatan (AI) Google, Google DeepMind, memamerkan teknologi terbaru mereka yang dijuluki “Magic Pointer”.

Sesuai namanya, fitur yang diperkenalkan bersama perangkat “Googlebook” ini merupakan kursor berbasis AI yang dirancang untuk memahami konteks dan objek yang sedang ditunjuk pengguna di layar komputer.

Google menyebut teknologi ini dikembangkan untuk membuat interaksi pengguna dengan AI menjadi lebih natural dan praktis, tanpa perlu mengetik perintah panjang atau berpindah aplikasi.

Nah, Magic Pointer bekerja dengan cara menangkap konteks visual dan semantik di sekitar posisi kursor. Artinya, AI dapat “melihat” bagian layar yang sedang diperhatikan pengguna dan memahami informasi penting di area tersebut.

Fitur ini juga dirancang untuk mendukung kombinasi antara gerakan kursor dan perintah suara. Dengan demikian, pengguna dapat memberikan instruksi singkat secara alami tanpa perlu mengetik detail panjang.

Google Ilustrasi fitur Magic Pointer memperbaiki kalimat yang sedang ditunjuk kursor.

Sebagai contoh, pengguna cukup mengarahkan kursor ke gambar sebuah gedung dan mengucapkan “tunjukkan arah menuju lokasi ini”. Sistem AI nantinya akan memahami konteks gambar tersebut tanpa memerlukan penjelasan tambahan.

Selain mencari informasi lokasi, Magic Pointer juga dapat melakukan berbagai tugas lain yang biasa dikerjakan AI.

Contohnya seperti meringkas dokumen PDF, memperbaiki tulisan atau kalimat yang sedang diketik atau ditunjuk, hingga mengubah data statistik menjadi grafik.

Pengguna juga dapat memodifikasi resep makanan yang tampil di layar sesuai perintah, hingga memesan restoran yang sedang ditunjuk dalam sebuah video perjalanan.

Dalam salah satu demonstrasi, Google memperlihatkan bagaimana frame video yang dijeda dapat langsung berubah menjadi tautan pemesanan restoran.

Googlee Magic Pointer yang bisa memesan makanan dari restoran yang sedang ditunjuk di layar.

Sebagaimana dirangkum KompasTekno dari 9to5Google, Magic Pointer menjadi salah satu fitur yang tersemat di Googlebook, perangkat laptop konsep Google yang disebut menggabungkan elemen Windows, Chromebook, dan Android.

Meski demikian, fitur ini juga akan hadir di layanan Gemini yang terintegrasi di browser Google Chrome pada masa mendatang.

Dengan Magic Pointer, pengguna Chrome nantinya bisa menunjuk bagian tertentu di halaman web lalu bertanya kepada Gemini mengenai area tersebut.

Misalnya, pengguna dapat memilih beberapa produk di situs belanja dan meminta AI membandingkan spesifikasinya. Pengguna juga bisa menunjuk area ruang tamu di layar untuk memvisualisasikan sofa baru secara virtual.

Untuk menjajal Magic Pointer, pengguna dapat mengakses demo fitur tersebut di AI Studio. Saat ini, Google menyediakan dua demo, yakni untuk mengedit gambar dan mencari lokasi di peta.

Tag: #google #pamer #magic #pointer #kursor #yang #bisa #memahami #layar