Desain Sistem Komunikasi Dua Arah Sistem Isyarat Bahasa Indonesia untuk Penyandang Disabilitas Tunarungu-Wicara Berbasis Smart Glove

Retnoningsih, Ambar (2023) Desain Sistem Komunikasi Dua Arah Sistem Isyarat Bahasa Indonesia untuk Penyandang Disabilitas Tunarungu-Wicara Berbasis Smart Glove. Other thesis, Institut Teknologi Sepuluh Nopember.

Text 07311940000013-Undergraduate_Thesis.pdf - Accepted Version Restricted to Repository staff only until 1 October 2025. Download (4MB) | Request a copy

Abstract

Komunikasi merupakan hal yang fundamental di kehidupan manusia. Namun tidak semua orang dapat melakukan komunikasi tanpa hambatan seperti pada penyandang tunarungu-wicara. Penyandang tunarungu-wicara adalah seseorang yang mengalami keterbatasan dalam berbicara dan mendengar. Salah satu cara untuk berkomunikasi dengan penyandang tunarungu-wicara adalah dengan bahasa isyarat. Namun, tidak semua orang memahami dan terlatih untuk berkomunikasi dengan menggunakan bahasa isyarat. Pada penelitian sebelumnnya, alat asistif hanya dikembangkan untuk sistem komunikasi secara satu arah saja dari penyandang disabilitas tunarungu-wicara ke orang normal. Oleh karena itu, pada penelitian ini dirancanglah sistem komunikasi dua arah berbasis sarung tangan pengonversi gerakan Sistem Isyarat Bahasa Indonesia ke dalam suara dengan memanfaatkan multi-sensor yaitu flex sensor, sensor tekanan, dan sensor inersia. Data yang didapatkan dari kombinasi sensor tersebut kemudian diteruskan ke mikrokontroler untuk diproses dan diklasifikasikan, sehingga dari huruf-huruf alfabet yang terdeteksi akan membentuk suatu kata. Pengiriman data ke aplikasi pada smartphone memanfaatkan komunikasi Bluetooth dan data tersebut dikonversi menjadi suara menggunakan algoritma text-to-speech. Pemberian umpan balik dari lawan bicara dapat dilakukan dengan merekam suara secara langsung pada smartphone yang akan dikonversi menjadi tulisan menggunakan algoritma speech-to-text. Dalam penelitian ini, perangkat asistif yang dirancang dapat berfungsi dengan baik. Keakuratan untuk pendeteksian setiap huruf alfabet sendiri sebesar 84,63% dan keakuratan protokol kata sebesar 88%. Proses komunikasi secara dua arah juga telah dapat direalisasikan dengan konversi text-to-speech dan speech-to-text ke dalam Bahasa Indonesia baku mencapai akurasi 100%. Untuk peningkatan keakuratan perangkat, kedepannya perangkat dapat dirangcang secara khusus untuk setiap subjek.
=================================================================================================================================
Communication is a fundamental part of human life. However, not everyone is able to communicate without barriers, for example hearing and speech impaired individuals. Hearing and speech impaired individuals refer to those with limitations in speaking and hearing abilities. One way to communicate with hearing and speech impaired individuals is through sign language. However, not everyone understands and is trained to communicate using sign language. In previous research, assistive devices were only developed for one-way communication systems from hearing and speech impaired individuals to normal people. Therefore, in this study, a two-way communication system based on a hand glove converter of Indonesian Sign Language gesture into audio is designed using multi-sensors, namely flex sensors, pressure sensors, and inertia sensors. The data obtained from the combination of these sensor data is then sent to the microcontroller for processing and classification, so that the detected alphabet letters will form a word. Data transmission to the smartphone application utilizes Bluetooth communication, and the data is converted into audio using a text-to-speech algorithm. Feedback from the second party can be delivered by directly recording sound on the smartphone, which then will be converted into text using the speech-to-text algorithm. In this research, the designed assistive device can work properly. The accuracy for the detection of each alphabet letter itself is 84.63% and the accuracy of the word protocol is 88%. The two-way communication process has also been realized with text-to-speech and speech-to-text conversion into Bahasa Indonesia which achieved 100% accuracy. To improve the accuracy of the device, a customized device can be designed for each subject in the future.

Item Type:	Thesis (Other)
Uncontrolled Keywords:	Bahasa isyarat, komunikasi dua arah, sarung tangan, smartphone, tunarungu-wicara, Sign language, two-way communication, hand glove, hearing, speech impaired.
Subjects:	T Technology > TK Electrical engineering. Electronics Nuclear engineering > TK7871.674 Detectors. Sensors T Technology > TK Electrical engineering. Electronics Nuclear engineering > TK7878 Electronic instruments
Divisions:	Faculty of Intelligent Electrical and Informatics Technology (ELECTICS) > Biomedical Engineering > 11410-(S1) Undergraduate Thesis
Depositing User:	Ambar Retnoningsih
Date Deposited:	26 Oct 2023 02:36
Last Modified:	26 Oct 2023 02:36
URI:	http://repository.its.ac.id/id/eprint/103841

Actions (login required)

View Item