ABSTRAK
Nama : Moh. Faisal
Program Studi : Ilmu Komputer
Judul : Pengembangan Model Pengenal Gerakan Bahasa Isyarat
Indonesia (BISINDO) dengan Menggunakan MobileNetV2
sebagai Feature Extractor dan LSTM sebagai Classifier
Bahasa Isyarat Indonesia (BISINDO) merupakan salah satu bahasa isyarat yang banyak
digunakan kaum Tuli di Indonesia karena dianggap lebih alami sehingga lebih mudah
digunakan. BISINDO digunakan kaum Tuli untuk berkomunikasi dengan orang lain
dalam kegiatan sehari-harinya. Namun, pada kenyataannya, masih banyak orang yang
belum mengerti bahasa isyarat. Hal tersebut menjadi kendala bagi orang Tuli untuk
berkomunikasi dengan orang dengar dan sebaliknya. Perkembangan teknologi yang
semakin maju memberikan suatu solusi untuk masalah tersebut. Pada penelitian ini akan
dikembangkan model untuk mengenali gerakan isyarat BISINDO dengan menggunakan
MobileNetV2 dan Long Short-Term Memory (LSTM). MobileNetV2 digunakan pada
tahap feature extraction sedangkan LSTM digunakan pada tahap klasifikasi gerakan
isyarat. Dataset yang digunakan pada penelitian ini berupa video 40 kalimat yang
direkam dengan menggunakan kamera smartphone dan diperagakan oleh empat orang
Tuli dari Laboratorium Riset Bahasa Isyarat FIB UI (LRBI FIB UI). Terdapat tahapan
preprocessing untuk mendapatkan bagian tangan dan wajah yang merupakan fitur penting
untuk membedakan gerakan isyarat. Penelitian ini menghasilkan model LSTM 1-layer
bidirectional sebagai model terbaik dengan akurasi tertinggi sebesar 91,53%.
Kata kunci:
Bahasa Isyarat, BISINDO, feature extraction, Klasifikasi, Long Short-Term Memory
(LSTM), MobileNetV2.
|
|