Implementasi Teknik Deep Learning pada Analisis Gerakan dalam Bahasa Isyarat untuk Pemahaman dan Terjemahan Otomatis ke Bahasa Jawa dalam Konteks Percakapan Sehari-hari Menggunakan Metode YOLO

Abstract

Penelitian ini bertujuan mengimplementasikan teknik pembelajaran mendalam pada analisis gerakan bahasa isyarat untuk terjemahan otomatis ke dalam bahasa Jawa dalam konteks percakapan sehari-hari. Bahasa Isyarat Indonesia (BISINDO) dipilih sebagai objek penelitian karena tantangan dalam menerjemahkannya ke bahasa lisan yang cukup kompleks. Metode YOLO digunakan untuk mendeteksi gerakan bahasa isyarat dalam video secara langsung dan mengubahnya menjadi bahasa Jawa. Data bahasa isyarat yang telah dianotasi digunakan dalam pelatihan sistem untuk mencapai hasil terjemahan yang akurat. Hasil penelitian menunjukkan bahwa sistem mampu mendeteksi dan menerjemahkan bahasa isyarat dengan akurasi dan kecepatan tinggi, dengan rata-rata waktu deteksi kurang dari 150 ms. Penelitian ini diharapkan dapat meningkatkan aksesibilitas komunikasi bagi penyandang disabilitas, serta membuka peluang pengembangan aplikasi serupa untuk bahasa isyarat lain. Kata Kunci: Bahasa Isyarat, Deep Learning, YOLO, Bahasa Jawa