Pengembangan Sistem Pengenalan Bahasa Isyarat Indonesia Menggunakan Mediapipe Hands Dan Face Mesh Berbasis Temporal Convolutional Network (TCN)

Hernando, Rafael Dwiky Novian (2026) Pengembangan Sistem Pengenalan Bahasa Isyarat Indonesia Menggunakan Mediapipe Hands Dan Face Mesh Berbasis Temporal Convolutional Network (TCN). Undergraduate thesis, Politeknik Negeri Jember.

[img] Text (Abstract)
Abstract.pdf - Submitted Version
Available under License Creative Commons Attribution Share Alike.

Download (208kB)
[img] Text (Bab 1 Pendahuluan)
Bab 1 Pendahuluan.pdf - Submitted Version
Available under License Creative Commons Attribution Share Alike.

Download (204kB)
[img] Text (Daftar Pustaka)
Daftar Pustaka.pdf - Submitted Version
Available under License Creative Commons Attribution Share Alike.

Download (169kB)
[img] Text (Laporan Lengkap)
Laporan Lengkap.pdf - Submitted Version
Restricted to Registered users only

Download (5MB) | Request a copy

Abstract

Bahasa isyarat Indonesia (SIBI dan BISINDO) digunakan oleh penyandang tunarungu untuk berkomunikasi, namun pemahaman masyarakat terhadapnya masih terbatas. Penelitian ini bertujuan mengembangkan sistem pengenalan bahasa isyarat Indonesia secara real-time sebagai media pembelajaran interaktif di Kedai Susu Tuli (K-Suli), yang selama ini hanya menggunakan poster dan kamus gambar. Sistem memanfaatkan MediaPipe Hands dan Face Mesh untuk mengekstraksi landmark tangan dan wajah, yang diklasifikasikan menggunakan Temporal Convolutional Network (TCN) dengan empat model, yaitu abjad SIBI, abjad BISINDO, angka, dan kata. Setiap frame diekstraksi menjadi 306 fitur dan disusun menjadi sekuens 30 frame. Sistem diimplementasikan dalam website berbasis Flask dan ReactJS dengan menu kamus isyarat. Hasil pengujian menunjukkan akurasi model abjad SIBI sebesar 96,50%, abjad BISINDO 83,56%, angka 95,74%, dan kata 97,41%, sedangkan User Acceptance Testing (UAT) mencatat tingkat penerimaan pengguna sebesar 92,12%. Dengan demikian, sistem ini dapat menjadi media pembelajaran bahasa isyarat yang interaktif di K-Suli.

Item Type: Thesis (Undergraduate)
Contributors:
ContributionContributorsNIDN/NIDK
Thesis advisorPutranto, Hermawan AriefNIDN0009018304
Uncontrolled Keywords: Bahasa Isyarat, SIBI, BISINDO, Temporal Convolutional Network (TCN), MediaPipe Hands, Face Mesh, Real-time.
Subjects: 410 - Rumpun Ilmu Teknik > 450 - Teknik Elektro dan Informatika > 458 - Teknik Informatika
410 - Rumpun Ilmu Teknik > 450 - Teknik Elektro dan Informatika > 459 - Ilmu Komputer
410 - Rumpun Ilmu Teknik > 450 - Teknik Elektro dan Informatika > 461 - Sistem Informasi
410 - Rumpun Ilmu Teknik > 450 - Teknik Elektro dan Informatika > 463 - Teknik Perangkat Lunak
Divisions: Jurusan Teknologi Informasi > Prodi D4 Teknik Informatika > Tugas Akhir
Depositing User: Rafael Dwiky Novian Hernando
Date Deposited: 03 Nov 2026 08:30
Last Modified: 03 Nov 2026 08:31
URI: https://sipora.polije.ac.id/id/eprint/61170

Actions (login required)

View Item View Item