Alat AI Membantu Pengguna Dengan Gangguan Penglihatan Untuk Mengingat Lingkungan Dengan Lebih Baik

Sistem AI VIPTour dipersiapkan untuk memperbaiki secara signifikan cara orang dengan kebutaan atau penglihatan rendah (BLV) menemukan lingkungan baru.

Sebuah tim peneliti mengembangkan VIPTour sebagai sistem yang memungkinkan pengguna untuk mengeksplorasi taman dan atraksi wisata secara mandiri, yang pada gilirannya meningkatkan kepuasan dan pemahaman mereka terhadap ruang-ruang tersebut. Temuan mereka dipublikasikan di Nature.

Sistem ini mengintegrasikan kamera kompak dengan aplikasi smartphone yang menjalankan algoritma AI yang dikenal sebagai FocusFormer. FocusFormer memproses adegan secara real time, untuk mengidentifikasi poin penting seperti penanda keamanan.

Sistem ini memberikan rekomendasi eksplorasi, yang menyesuaikan dengan preferensi pengguna individu, seperti memilih suara alam daripada informasi sejarah.

Para peneliti berpendapat bahwa komunitas BLV mungkin mendapatkan manfaat dari VIPTour melalui panduan khusus berdasarkan minat pengguna, audio yang disederhanakan, deskripsi taktil dari adegan yang kompleks, serta kemampuan memutar ulang dan berbagi tur. Sistem ini dirancang untuk menyediakan fungsi yang bertujuan untuk meningkatkan pengalaman pengguna di luar bantuan dasar.

Dalam percobaan yang melibatkan lebih dari 30 peserta BLV, manfaatnya sangat mengejutkan. Kesejahteraan emosional meningkat secara dramatis, dengan peningkatan emosi positif sebesar 67,9% dan kenaikan antusiasme sebesar 94,7%. Pengguna juga menunjukkan peningkatan sebesar 772,73% dalam mengingat adegan, dan retensi memori jangka panjang meningkat dua kali lipat.

Banyak yang melaporkan merasa lebih mandiri, kurang bergantung pada orang lain untuk menjelajahi atau memahami lingkungan mereka. Peneliti mencatat bagaimana jutaan individu BLV menghadapi eksklusi dari aktivitas rekreasi karena lingkungan yang tidak dapat diakses, tim penelitian mencatat.

Sementara alat yang ada membantu orang-orang untuk pindah dari satu tempat ke tempat lain, mereka sering gagal menciptakan pengalaman yang menyenangkan dan berkesan. VIPTour mencoba untuk mengisi celah tersebut dengan menggabungkan AI mutakhir dengan desain yang berpusat pada pengguna.

Para pengembang berharap VIPTour akan menginspirasi lebih banyak teknologi inklusif yang tidak hanya berfokus pada aksesibilitas, tetapi juga pada otonomi dan kegembiraan.