ABSTRAK
Nama : Misael Jonathan
Program Studi : Ilmu Komputer
Judul : Pengembangan Aplikasi Pengenalan Bahasa Isyarat SIBI
(Sistem Isyarat Bahasa Indonesia) Berbasis Android
Bahasa isyarat menjadi sarana utama bagi penyandang tunarungu untuk
berkomunikasi. Kemampuan penyandang tunarungu untuk beradaptasi dengan
lingkungannya ditentukan dari seberapa baik komunikasi dua arah dapat dilakukan
dengan bahasa isyarat. Adanya smartphone sebagai teknologi yang umum
digunakan masyarakat luas dapat menjadi sarana bagi masyarakat untuk
berkomunikasi dengan penderita tunarungu. Penelitian ini berfokus pada
pengembangan aplikasi yang mampu mengimplementasikan sistem penerjemah
SIBI pada smartphone Android. Penelitian ini menggunakan hasil freeze model
yang dikembangkan oleh peneliti sebelumnya yaitu MobileNetV2, CRF, dan
LSTM. Ketiga model tersebut berjalan sebagai serangkaian proses dan digunakan
untuk memproses data video gerakan isyarat. Keluaran dari sistem penerjemah ini
adalah terjemahan isyarat dalam bentuk teks. Penelitian ini juga melakukan
percobaan untuk meningkatkan kinerja MobileNetV2 dengan menerapkan parallel
processing dengan dua hingga empat inference. Berdasarkan hasil percobaan,
sistem penerjemah yang dikembangkan mampu menerjemahkan bahasa isyarat
dengan akurasi kata 90,560%, akurasi kalimat 64%, dan waktu penerjemahan ratarata 20 detik. Penggunaan parallel processing dapat meningkatkan kinerja
MobileNetV2 sebesar 54%.
Kata kunci:
Pengenalan Bahasa Isyarat, SIBI, Android, TensorFlow, parallel processing
|
|