ChatGPT Kini Bisa Analisis Keadaan Sekitar Pengguna lewat Video

Beritasaja.com - perusahaan kecerdasan buatan (artificial intelligence/) , kini meng-upgrade fitur Advanced Voice Mode di bikinannya, .

Advance Voice Mode (AVM) adalah fitur yang memungkinkan pengguna mengobrol dengan ChatGPT secara luwes dan instan layaknya mengobrol dengan manusia.

Kini, Advanced Voice Mode dibekali kemampuan untuk menganalisis keadaan sekitar pengguna lewat video dan screenshare (membagikan layar).

Caranya adalah dengan "melihat" konten yang ditampilkan di ponsel, tentunya dengan izin akses yang diberikan pengguna.

Dengan dukungan itu, ChatGPT bisa memahami apa yang "dilihatnya" melalui kamera ponsel, kemudian memberikan respons terkait obyek atau konten tadi, nyaris secara real-time.

Untuk konten di ponsel misalnya, ChatGPT mendapat akses ke layar lewat opsi screen sharing atau berbagi layar.

Dengan kemampuan ini, ChatGPT bisa menjelaskan aneka opsi di menu Pengaturan (Setting) atau memberikan saran terkait soal matematika yang ditampilkan di layar.

Baca juga:

Sementara untuk melihat obyek di sekitar pengguna, ChatGPT mendapat kemampuan penglihatan lewat kamera ponsel pengguna.

Dalam sebuah demo di acara "60 Minutes" di Beritasaja, Presiden OpenAI, Greg Brockman, memamerkan kemampuan ChatGPT yang bisa "melihat" kepada pembawa acara TV kenamaan, Anderson Cooper.

Cooper diminta menggambar bagian tubuhnya di papan tulis.

Dalam waktu bersamaan, ChatGPT diminta menanggapi kemampuan Cooper dalam menggambar anatomi tubunnya.

"Lokasinya tepat.

Otaknya ada di kepala.

Soal bentuknya, ini cukup oke.

(Bentuk) Otaknya cenderung oval," kata ChatGPT merespons gambar Cooper.

Dalam demo lainnya, AVM ChatGPT diminta merespons soal terkait geometri.

Namun jawabannya agak ngawur.

Dengan kata lain, chatbot ini masih rentan akan halusinasi karena tidak selalu memberikan respons yang tepat.

Video lengkap terkait demo kemapuan ChatGPT tersebut bisa dilihat pada tautan .

Kemampuan ChatGPT untuk "melihat" sendiri dirilis OpenAI secara bertahap mulai Kamis (12/12/2024) waktu Amerika Serikat, ke sejumlah pengguna secara terbatas.

Mereka yang kebagian fitur ini yaitu pengguna yang berlangganan ChatGPT Plus, Team atau Pro.

Karena terbatas, tidak semua pelanggan ChatGPT di atas kebagian AVM yang disempurnakan.

Sementara itu pengguna ChatGPT Enterprise dan Edu akan mendapatkan fitur serupa pada Januari 2025 mendatang, dihimpun BeritasajaTekno dari TechCrunch, Jumat (13/12/2024).

Fitur Advance Voice Mode pertama kali diperkenalkan OpenAI pada Mei 2024 lalu.

Fitur ini merupakan peningkatan dari fitur input maupun output suara yang sudah dimiliki ChatGPT sejak September 2023 silam.

Fitur Advance Voice Mode