A New Approach to Arabic Sign Language Recognition System

Abstract

لغة الإشارة هي مهمة لتسهيل التواصل بين ضعاف السمع وبقية أفراد المجتمع. ولكن قليل من الناس من يعرف لغة الإشارة. ولذلك، هناك حاجة إلى تطوير أنظمة للترجمة بين اللغة المنطوقة ولغة الإشارة تلقائيا. لم تشهد لغة الإشارة العربية (ArSL) اهتماما في الابحاث كغيرها من لغات الإشارة الاخرى. وقد جرت العادة على استخدام نهجين مختلفين للترجمة: النظم المستندة إلى تحليل الصور والنظم القائمة على القفازات الالكترونية. النظم التي تعتمد على القفازات تتطلب من المستخدم ارتداء أداة الإلكترونية أثناء تنفيذ الاشارات. تتضمن القفازات عدد من الحساسات الدقيقة للكشف عن حركة مختلف مفاصل اليد والأصابع. النظم القائمة على تحليل الصور تستخدم كاميرات للحصول على سلسلة من الصور لمنفذ الاشارات. كل من النهجين له سلبياته الخاصة. طريقة القفاز تجبر المستخدم على ارتداء أداة مرهقة مما يجعل الحركة غير طبيعية بينما نظام الكاميرات يتطلب خلفية وظروف بيئية محددة لتحقيق درجة عالية من الدقة. في هذه الأطروحة، نقترح نهجا جديدا لنظام التعرف على لغة الاشارات العربية يستخدم جهاز تحكم تم تطويره مؤخرا يدعى Leap Motion Controller (LMC). وقد تم جمع بيانات مائة مفردة من اشخاص صم ممن لديهم خبرة بلغة الاشارة العربية. وقد تم جمع عشرة نماذج مختلفة من كل مفردة سبعة نماذج استخدمت لتطوير النظام والثلاثة الباقية للتقييم. وفي نماذج التقييم تم التوصل إلى دقة تعرف بحدود 80.60٪ باستخدام Gaussian Mixture Model (GMM).