ابتكار تقنية ذكاء اصطناعي تقرأ حركة الشفاه وتحول الكلام إلى نصوص مكتوبة دون صوت
طوّر باحثون في كوريا الجنوبية تقنية جديدة تعتمد على الذكاء الاصطناعي، قادرة على قراءة حركة الشفاه وتحويل الكلام إلى نصوص مكتوبة دون الحاجة إلى سماع الصوت، في ابتكار قد يسهم في تسهيل التواصل مع الصم وضعاف السمع.
وتمكن التقنية، التي طورها باحثون من المعهد الكوري المتقدم للعلوم والتكنولوجيا (KAIST)، من تحليل حركات الفم والتعرف على الكلمات بالاستعانة بسياق الجملة، ما يساعد على تجاوز صعوبة التمييز بين بعض الأصوات المتشابهة في حركة الشفاه.
ووفقاً للباحثين، حقق النظام الجديد معدل خطأ في التعرف على الكلمات بلغ 19.4 بالمائة، بعد تدريبه باستخدام قاعدة بيانات تضم 433 ساعة من مقاطع الفيديو المصحوبة بنصوص الكلام.
ومن المتوقع أن تفتح هذه التقنية آفاقاً جديدة لتطوير أدوات مساعدة لذوي الإعاقة السمعية، فضلاً عن استخدامها في المصانع والمواقع الصناعية التي تعيق فيها الضوضاء التواصل بين العاملين.
ويعمل الفريق البحثي حالياً على تقليل حجم النظام ومتطلباته الحاسوبية، تمهيداً لدمجه في الأجهزة القابلة للارتداء والروبوتات، مع إمكانية تشغيله في الوقت الفعلي دون الحاجة إلى الاتصال بالإنترنت.
