في ظل الثورة التي نشهدها في مجال السيارات الذكية، يصبح فهم عواطف السائقين وحالتهم النفسية أمراً ضرورياً لضمان تجربة قيادة آمنة وتفاعلية. ومن هنا، تم تقديم InCarEmo، مجموعة بيانات متعددة الوسائط التي جاءت لتسد الفجوات الموجودة في مجموعات البيانات العامة في مجال الحسابات العاطفية داخل السيارة.

تتضمن مجموعة بيانات InCarEmo أنواعاً متعددة من المعلومات، مثل مقاطع الفيديو بتقنيتي RGB والأشعة تحت الحمراء، بالإضافة إلى بيانات صوتية ونصوص حوار تم جمعها من سيناريوهات مصممة بعناية لمحاكاة سلوكيات السائق في ظروف إضاءة وسياقات قيادة متنوعة.

تدعم مجموعة البيانات ثلاث مهام رئيسية:
1. التعرف على العواطف المتعددة الوسائط،
2. اكتشاف التعب،
3. مراقبة الانتباه.

تأتي بيانات InCarEmo الأصلية باللغة الصينية، وذلك بالإضافة إلى معيار مساعد باللغة الإنجليزية لدعم التقييم عبر اللغات. كما تقدم مجموعة البيانات مقياسًا موحدًا مع نتائج أساسية واسعة عبر أساليب بيانات أحادية ومتعددة الوسائط، حيث تم إجراء تحليلات تحت شروط فقدان الوسائط والضوضاء.

تظهر النتائج التجريبية فوائد الدمج المتعدد الوسائط والتحديات المتبقية تحت ظروف ضوضاء العالم الحقيقي والضوء المنخفض. من خلال إطلاق InCarEmo، نهدف إلى إنشاء أساس شامل لفهم العواطف بطرق موثوقة وقابلة للتفسير، مما يسهم في التفاعل الأكثر أمانًا وتعاطفًا بين السائق والمركبة.