PENGEMBANGAN SISTEM DETEKSI OBJEK BERBASIS SPEECH RECOGNITION DENGAN MENGGUNAKAN YOLOV8 UNTUK PENYANDANG TUNANETRA

ABSTRAK Kesulitan penyandang tunanetra dalam melakukan aktivitas sehari-hari khususnya di dalam ruangan menjadi permasalahan serius. Keterbatasan dalam mengenali lingkungan sekitar dengan baik dapat membahayakan dan menciptakan ancaman bagi mereka. Pengembangan teknologi asistif untuk penyandang tunanetra merupakan salah satu solusi untuk permasalahan tersebut, khususnya dalam konteks meningkatkan kemandirian dan mobilitas mereka. Penelitian ini mengusulkan sebuah sistem deteksi objek berbasis speech recognition menggunakan algoritma YOLOv8 (You Only Look Once version 8). Sistem ini dirancang untuk membantu penyandang tunanetra dalam mengenali dan mengidentifikasi objek di sekitar mereka secara real-time melalui instruksi suara. Sistem dikembangkan dengan memanfaatkan YOLOv8 yang dioptimasi oleh Adam optimizer dan Particle Swarm Optimization untuk optimasi parameter. Selain itu, sistem dikombinasikan dengan teknologi pengenalan suara, pembangkitan sintesis suara, dan model perkiraan jarak objek yang mampu menerima dan memproses perintah suara dari pengguna. Implementasi ini mencakup pelatihan model YOLOv8 pada dataset yang relevan untuk memastikan kemampuan deteksi objek yang optimal dalam berbagai kondisi lingkungan. Eksperimen dilakukan dengan menggunakan dua dataset, yaitu MS COCO dataset untuk perbandingan dengan sistem yang ada saat ini dan custom dataset untuk pengujian secara real-time. Hasil eksperimen pada sistem yang dilatih pada MS COCO dataset menghasilkan nilai mAP50 dan mAP50-95 masing-masing sebesar 66.1% dan 44.7%. Selanjutnya hasil eksperimen pada situasi real-time yang menggunakan custom dataset menunjukkan hasil evaluasi mAP50 sebesar 74.7%, mAP50-95 sebesar 48.6%, kecepatan inferensi sebesar 14.4 ms, frame rate berada pada rentang 24-30 frame/s, dan akurasi perkiraan jarak objek sebesar 70.1% . Pengujian lebih lanjut dalam situasi nyata juga menunjukkan potensi besar sistem ini untuk diadopsi sebagai alat bantu mobilitas bagi penyandang tunanetra, memberikan mereka lebih banyak kemandirian dan keamanan dalam aktivitas sehari-hari.

Kata Kunci: Adam Optimizer, Deteksi Objek, Particle Swarm Optimization, Speech Recognition, Text-to-Speech, YOLOv8.