Open Access Journal

International Science and Technology Journal

ISSN: 2519-9854 (Online)

ISSN: 2519-9846 (Print)

DOI: www.doi.org/10.62341/ISTJ

A peer-reviewed and open access journal concerned with publishing researches and studies in the field of applied sciences and engineering

Published by

Supervised by

Talking Glove for Gesture Recognition with Flex Sensors

الملخص
يواجه الصم والبكم صعوبة في التواصل مع محيطهم، لا سيما أولئك الذين لا يعرفون لغة الإشارة، مما يجعلهم بعيدًا نسبيًا عن مجتمعاتهم. بالإضافة إلى ذلك، من المهم بالنسبة لهم التفاعل مع الآخرين من أجل عيش حياة طبيعية والحصول على وظائف. تهدف هذه الورقة إلى تصميم نظام مدمج باستخدام لوحة Arduino للحصول على نص مقروء، وصوت يمكن سماعه لمساعدة الصم والبكم على الانخراط في المجتمع. يتكون النظام من قفاز ناطق يتكون من خمسة مستشعرات انحناء تستشعر حركة اليد والأصابع ومقياس التسارع، التي تمت برمجتها بواسطة المتحكم الدقيقArduino Nano، الذي يترجم حركات اليد إلى نص يظهر على شاشةLCDباللغة الإنجليزية ويخرج أيضًا من الصوت المقابل باللغة العربية، بالإضافة إلى مقاومة متغيرة للتحكم في كثافة الصوت؛ تم تطبيق هذا النظام على عدد من الأشخاص. كما نوصي ان يتم استخدم الذكاء الاصطناعي لتعزيز كفاءة النظام واستخدام لوحة PCB لجعل النظام أكثر تنسيقا.............. الكلمات المفتاحية............ الصم والبكم، لغة الإشارة، أردوينو نانو، قفاز ناطق.
Abstract
Deaf and dump people have difficulty communication with their surroundings, especially those who do not know sign language, which makes them relatively aloof from their communities. In addition, it is important for them to interact with others in order to live a normal life and gets jobs. This paper aims to design an embedded system using the Arduino board to get a readable text, and a voice that can be heard to help deaf and dumb people engage in society. The system consists of a talking glove consisting of five curvature sensors that sense the movement of the hand and fingers and an accelerometer, which was programmed by the Arduino Nano microcontroller, which translates the hand movements into text that appears on the LCD screen in English and also exits the corresponding sound in Arabic, as well as variable resistance to sound intensity control; This system has been applied to a number of people. As recommended, artificial intelligence should be used to enhance system efficiency and a PCB board should be used to make the system more organized...................... Keywords..............Deaf and dumb, Sign Language, Arduino Nano, talking glove.