كلية هندسة المعلومات بجامعة النهرين تناقش نظام التعرف على لغة الإشارة

 ناقش قسم هندسة المنظومات بكلية هندسة المعلومات بجامعة النهرين رسالة الماجستير للطالبة صفا علي عبد ،  الموسومة  نظام التعرف على لغة الإشارة .
Sign Language Recognition system
 
تضمنت الرسالة للمساعدة على فهم لغة الاشارة و بسبب الحاجة إلى بناء أنظمة مساعدة للأشخاص ذوي الاحتياجات الخاصة للتواصل مع العامة تم تنفيذ هذا العمل بطريقة مبتكرة لتمييز الحروف في لغة الإشارة . تهدف الرسالة الى  تصميم برنامج يعتمد على Computer Vision مع مبدأ التعلم العميق Deep Learning الذي يوفر ترجمة لغة الإشارة Sign Language إلى حرف اللغة الانكليزية، وبالتالي تمكين التواصل .حيث يمكن لهذا العمل أن يوسع قدرات الاشخاص الصم على الاندماج في الحياة الاجتماعية عن طريق اخذ فديو حي في الوقت الفعلي من الكاميرا الخاصة بأجهزة الابتوب او المحمول مع ترجمتها بشكل مباشر الى الاحرف الانكليزية . وقد عملت الطالبة على إنشاء مجموعة البيانات الملتقطة يدويا المخصصة للتدريب باستخدام الشبكات العصبونية CNN حيث يتم استخدام هذا البيانات الممثلة بلغة الإشارة في تدريب نموذج التعلم العميق المقترح و ايضا خوارزمية Convexhull لعزل إيماءة اليد عن خلفية الإطار الملتقط مع احدث التقنيات من Google Mediapipe حيث يتم استخدام النقط و الانابيب لتحديد حالة اليد وكانت السرعة و الدقة في تنفيذ العمل ممتازة.