مثير للإعجاب

قد تكون خوارزمية تتبع اليد الجديدة خطوة كبيرة في التعرف على لغة الإشارة

قد تكون خوارزمية تتبع اليد الجديدة خطوة كبيرة في التعرف على لغة الإشارة

قامت العديد من الشركات ، مثل SignAll و Kintrans ، بإنشاء أنظمة ترجمة لغة الإشارة. في حين أن الأنظمة المتطورة ، إلا أنها لم تنتشر بعد.

تتمثل المهمة النهائية لهذه الشركات في السماح لملايين الأشخاص الذين يستخدمون لغة الإشارة بالتواصل بسهولة مع أي شخص.

الآن ، قد تكون خوارزمية جديدة للتتبع اليدوي من مختبرات الذكاء الاصطناعي في Google خطوة كبيرة في جعل هذا النوع الطموح من البرامج كل ما وعد به في الأصل.

ذات صلة: يمكن أن ينقذ تطبيق الهاتف الذكي هذا حياتك بثلاث كلمات فقط

تصور اليد في الوقت الحقيقي

باستخدام لا شيء سوى الهاتف الذكي والكاميرا الخاصة به ، ينشئ النظام الجديد لمختبرات الذكاء الاصطناعي في Google خريطة مفصلة للغاية ليد الشخص بحيث يمكنه بعد ذلك تتبع الاتصال.

قال الباحثان في Google Valentin Bazarevsky و Fan Zhang في مشاركة مدونة.

"إن الإدراك القوي في الوقت الفعلي لليد مهمة صعبة للغاية لرؤية الكمبيوتر ، حيث غالبًا ما تسد الأيدي نفسها أو بعضها البعض (مثل انسداد الأصابع / الكف وهز اليد) وتفتقر إلى أنماط التباين العالية.

وفقًا لتقارير TechCrunch ، تحولت شركات ، مثل SignAll ، إلى منصات الكاميرا ذات الاستشعار العميق من أجل تتبع حركات اليد. ومع ذلك ، فإن تتبع حركات اليد ، بأصابع تحجب بعضها البعض وتتحرك بسرعة ، يعد مهمة صعبة.

حسابات أسرع

كانت إحدى الطرق التي جعل بها الباحثون الخوارزمية الخاصة بهم تحسب إشارات اليد بشكل أسرع عن طريق تبسيط العملية قدر الإمكان - بيانات أقل تؤدي إلى وقت معالجة أقل.

أولاً ، يتدرب النظام على كف الشخص بدلاً من أخذ أبعاد اليد بأكملها. بعد ذلك ، تنظر خوارزمية منفصلة إلى الأصابع وكذلك راحة اليد وتعين 21 إحداثيات على المفاصل وأطراف الأصابع وما إلى ذلك.

لكي يتعلم الذكاء الاصطناعي هذه الإحداثيات ، كان على الباحثين إضافتها يدويًا 21 نقطة لبعض 30000 صورة الأيدي في مختلف الأوضاع وحالات الإضاءة.

تحفيز سبل البحث الجديدة

قام المطورون بفتح مصدر التعليمات البرمجية الخاصة بهم على أمل أن يجد الآخرون طرقًا مبتكرة لاستخدامها وتحسينها. يستخدم النظام إطار عمل الواقع المعزز MediaPipe الموجود في Google.

"نأمل أن يؤدي توفير وظيفة الإدراك اليدوي هذه إلى مجتمع البحث والتطوير الأوسع إلى ظهور حالات استخدام إبداعية ، وتحفيز تطبيقات جديدة وسبل بحث جديدة" ، كما يقولون في بيان مدونتهم.

لا يزال هناك طريق طويل لنقطعه قبل التعرف على لغة الإشارة بشكل فعال - يعتمد التواصل من خلال لغة الإشارة على إيماءات اليد وتعبيرات الوجه وإشارات أخرى. ومع ذلك ، فهذه خطوة مثيرة في الاتجاه الصحيح.


شاهد الفيديو: عبارات أساسية بلغة الإشارة الامريكية ASL - تعلم لغة الإشارة (شهر اكتوبر 2021).