Sebuah studi baru-baru ini yang dipresentasikan oleh para peneliti HSS di Pertemuan Tahunan American Academy of Orthopaedic Surgeons menunjukkan bahwa chatbot AI, khususnya ChatGPT versi 3.5, dapat meningkatkan tingkat kinerja yang dapat diharapkan ketika menjawab pertanyaan medis terkait operasi tulang belakang leher. Jelas bahwa keakuratannya ditunjukkan. Dalam penelitian ini, chatbot ditanyai sembilan pertanyaan kunci mengenai subjek tersebut dan dievaluasi keakuratan dan kejelasannya oleh dua ahli bedah tulang belakang leher independen.

Para ahli yang tidak terlibat dalam proses desain pertanyaan mengevaluasi respons chatbot dan menemukan skor rata-rata 8,1 dari 10. Keakuratan jawaban diberi peringkat 3,9 dari 5, dan kesesuaian diberi peringkat 2,2 dari 3. Namun, mereka mencatat bahwa respons ChatGPT kurang mendalam dan terkadang mengabaikan detail penting, seperti faktor spesifik pasien dan keahlian ahli bedah, yang memengaruhi kompleksitas prosedur.

Terlepas dari kekurangan yang disebutkan, tanggapan chatbot dianggap lebih mudah diakses dibandingkan makalah akademis dan pada tingkat keterbacaan yang sesuai untuk siswa sekolah menengah atas. Para ahli juga menekankan bahwa chatbots secara konsisten menyarankan pengguna untuk mencari konsultasi medis profesional dan memberikan perhatian lebih besar terhadap informasi yang diberikan.

Tim peneliti HSS berencana menggali lebih dalam penggunaan AI dalam perilaku pencarian informasi pasien. Tujuan mereka adalah untuk meningkatkan kualitas informasi yang diberikan oleh AI untuk memastikan pengguna menerima saran medis paling andal dan akurat.