يعاني الكثير من الأفراد المصابين بالتصرف الكلامي (Dysarthria) من صعوبات كبيرة في التعبير عن أنفسهم في المواقف المهنية مثل المؤتمرات والعروض والاجتماعات، حيث يكون التواصل الفوري أمرًا حيويًا.

تقدم أنظمة الاتصال البديل والتعزيز (AAC) دعمًا أساسيًا، لكنها غالبًا ما تفشل في تلبية احتياجات بيئات التواصل الاحترافي بسبب تأخيرها المرتفع ونمط الكلام غير الطبيعي. هنا يأتي دور نظام **Re-Sonance**، وهو نظام مبتكر يعتمد على تحويل الكلام بمساعدة نماذج لغوية مُعزَّزة (LLM) مصمم لسيناريوهات التواصل الفوري.

يجمع نظام Re-Sonance بين **Whisper ASR** لتحويل الكلام إلى نص، و**Qwen LLM** لتوليد النطق، و**CosyVoice TTS** لخلق صوت طبيعي، مما يضمن تحسين فهم الكلام والطبيعية مع الحفاظ على الأداء في الوقت الحقيقي.

لقد أظهرت التقييمات، سواء كانت ذاتية أو موضوعية، باستخدام مجموعة بيانات لنطق متحدثين باللغة الماندرين المصابين بالتصرف الكلامي، أن أسلوب إعادة بناء الكلام الخاص بنا قد حسن بشكل كبير من الفهم مع الحفاظ على اتساق المعنى للمتحدثين الذين يعانون من التصرف الكلامي الخفيف إلى المعتدل. ورغم أن الأداء لا يزال محدودًا في حالات التصرف الكلامي الشديد، تثبت نتائجنا إمكانيات الطرق المعتمدة على LLM لتعزيز أنظمة AAC المعتمدة على الكلام، مما يمهد الطريق لتقنيات تواصل أكثر فعالية وملاءمة.

لمزيد من التفصيلات حول كيفية تطور هذا النظام الثوري وتأثيره على تجربة الأفراد، انتظروا الجديد في عالم الذكاء الاصطناعي المفيد للجميع!