Menurut blog OpenAI, ChatGPT akan diperbarui untuk meningkatkan pengalaman pengguna dengan diperkenalkannya fitur audio dan gambar baru. Fitur-fitur ini akan memungkinkan pengguna untuk berpartisipasi dalam percakapan suara dan berbagi pengalaman mereka dengan AI secara visual. Misalnya, pengguna dapat mengambil foto suatu tempat terkenal dan mendiskusikan aspek-aspek menariknya, atau mengambil foto isi lemari es mereka untuk bertukar pikiran tentang ide makan malam. Fitur-fitur baru ini akan diluncurkan untuk pengguna Plus dan Enterprise selama dua minggu ke depan. Fungsi audio tersedia di platform iOS dan Android, dan fungsi gambar tersedia di semua platform. Pengguna kini dapat berinteraksi dengan asisten, meminta cerita pengantar tidur, dan menyelesaikan pertengkaran di meja makan. Fitur suara menggunakan Whisper, sistem pengenalan suara sumber terbuka, untuk mengubah kata-kata yang diucapkan menjadi teks. Pengguna juga dapat mendengarkan sampel audio untuk pengalaman yang lebih interaktif. Sebaliknya, fitur gambar memungkinkan pengguna menampilkan satu atau lebih gambar di ChatGPT. Ini dapat digunakan untuk memecahkan masalah, merencanakan makanan, dan menganalisis grafik kompleks dari data terkait pekerjaan. Fitur penglihatan dirancang untuk membantu pengguna dalam kehidupan sehari-hari dengan melihat apa yang mereka lihat. Pendekatan ini lahir dari kolaborasi dengan Be My Eyes, sebuah aplikasi seluler untuk penyandang tunanetra. Namun, langkah-langkah teknis diterapkan untuk menghormati privasi individu dan membatasi kemampuan ChatGPT untuk menganalisis dan berbicara langsung tentang orang-orang.