Implementasi Deteksi Gerakan Tangan untuk Sistem Interaktif Kios menggunakan Metode Long Short-Term Memory (LSTM)

Penyandang disabilitas tuna rungu di Indonesia menghadapi kendala dalam menggunakan teknologi berbasis suara. Penelitian ini bertujuan mengembangkan sistem kios interaktif berbasis deteksi gerakan tangan menggunakan metode Long Short-Term Memory (LSTM) untuk memberikan solusi yang lebih inklusif. P...

Full description

Saved in:
Bibliographic Details
Main Authors: Arvita Agus Kurniasari, I Gede Wiryawan, Pramuditha Shinta Dewi Puspitasari, Taufiq Rizaldi, Dhony Manggala Putra
Format: Article
Language:Indonesian
Published: Program Studi Sistem Komputer 2025-05-01
Series:Komputika
Online Access:https://ojs.unikom.ac.id/index.php/komputika/article/view/14914
Tags: Add Tag
No Tags, Be the first to tag this record!
Description
Summary:Penyandang disabilitas tuna rungu di Indonesia menghadapi kendala dalam menggunakan teknologi berbasis suara. Penelitian ini bertujuan mengembangkan sistem kios interaktif berbasis deteksi gerakan tangan menggunakan metode Long Short-Term Memory (LSTM) untuk memberikan solusi yang lebih inklusif. Proses penelitian mencakup pengumpulan dataset gerakan tangan menggunakan MediaPipe, pembagian dataset menjadi data pelatihan dan pengujian dengan rasio 75:25, serta pelatihan model menggunakan Learning Rate Scheduler. Arsitektur model dirancang untuk menangkap pola dari data keypoint dengan mengoptimalkan penggunaan lapisan dropout dan fungsi aktivasi softmax. Evaluasi menunjukkan model memiliki akurasi sebesar 90,22% pada data pengujian, dengan precision rata-rata 91%, recall 89%, dan F1-score 90%. Hasil uji coba juga menunjukkan performa yang konsisten pada gestur sederhana, namun penurunan akurasi terjadi pada gestur kompleks dan jarak jauh. Penelitian ini memberikan kontribusi penting dalam mendukung interaksi tanpa suara, khususnya bagi penyandang disabilitas tuna rungu, dengan mengintegrasikan teknologi LSTM dalam sistem kios interaktif
ISSN:2252-9039
2655-3198