Sistem Penerjemah Sederhana Bahasa Isyarat Indonesia Menggunakan Mediapipe Holistic, Long Short-Term Memory, dan Rule-Based Natural Language Processing

• Kategori : Skripsi
• Penulis : Nisa Maharani
• Identitas : 210511136 - Teknik Informatika
• Abstrak :
  

  ABSTRAK SISTEM PENERJEMAH SEDERHANA BAHASA ISYARAT INDONESIA MENGGUNAKAN MEDIAPIPE HOLISTIC, LONG SHORT-TERM MEMORY DAN RULE-BASED NATURAL LANGUAGE PROCESSING Oleh: Nisa Maharani 210511136 Bahasa Isyarat Indonesia (Bisindo) memiliki peran penting dalam komunikasi bagi komunitas tuli di Indonesia, namun kesadaran masyarakat akan pentingnya memahami bahasa isyarat masih rendah. Penelitian-penelitian terdahulu umumnya hanya berfokus pada deteksi isyarat secara per kata tanpa menerapkan Natural Language Processing (NLP) dan sebagian besar masih sebatas pembuatan model tanpa integrasi ke dalam aplikasi web atau mobile. Penelitian ini mengembangkan prototipe sistem penerjemah sederhana Bisindo yang mampu mengenali gerakan isyarat dan menampilkannya dalam bentuk teks. Sistem memanfaatkan MediaPipe Holistic untuk mengekstraksi titik landmark tubuh, tangan, dan wajah, yang selanjutnya diklasifikasikan menggunakan model Long Short-Term Memory (LSTM). Hasil klasifikasi kemudian diproses menggunakan metode NLP berbasis aturan (rule-based) untuk membentuk struktur kalimat sederhana. Hasil pengujian menunjukkan bahwa sistem mampu mengenali beberapa isyarat dasar, namun akurasi prediksi menurun pada kondisi pencahayaan yang bervariasi karena MediaPipe kesulitan mendeteksi landmark secara konsisten. Meskipun sistem ini belum layak digunakan untuk komunikasi langsung, penelitian ini dapat menjadi landasan untuk pengembangan teknologi penerjemah Bisindo yang lebih andal dan terintegrasi. Kata kunci: Bahasa Isyarat Indonesia, MediaPipe Holistic, LSTM, machine learning, rule-based NLP.

Preview