اكتشف OmniHands: ثورة في استعادة الشبكات اليدوية ثلاثية الأبعاد عبر تقنيات تحويل مبتكرة!

في عصر الذكاء الاصطناعي، تبرز تقنية OmniHands كحل مبتكر في استعادة الشبكات اليدوية (hand meshes) من مدخلات أحادية أو متعددة. حيث يتناول هذا النهج التحديات الطاغية التي واجهتها الأساليب السابقة، بما فيها غياب حل موحد لمعالجة أنواع مختلفة من صور اليدين وغياب التركيز على العلاقة المكانية بين يديّ الشخص.

تتميز OmniHands بتصميم معماري شامل يجمع بين استراتيجيات جديدة في تقنيات تقسيم المعلومات (tokenization) ودمج الخصائص السياقية (contextual feature fusion)، مما يتيح تكيف النظام مع مختلف المهام. ويعتمد النظام على تقنية جديدة تُعرف باسم Relation-aware Two-Hand Tokenization (RAT)، التي تقوم بإدماج معلومات العلاقة المكانية بين اليدين ضمن الرموز المستخدمة.

يمكن للنظام أن يدعم كلاً من المدخلات ذات اليد الواحدة ويدين، مما يسمح بإعادة بناء التفاعلات اليدوية المعقدة في بيئات العالم الحقيقي. يسهم هذا التصميم المبتكر إلى جانب تطوير وحدة التفكير التفاعلية ثلاثية الأبعاد (4D Interaction Reasoning (FIR)) في دمج الرموز اليدوية في بعدين بمزيد من التركيز والدقة.

لقد أثبتت نتائجنا على عدة مجموعات بيانات مرجعية تحقيق نظام OmniHands لنتائج متفوقة في إعادة تكوين اليدين التفاعلية، مما يظهر قدرته الفائقة على التعامل مع مقاطع الفيديو في بيئات الحياة الواقعية. لمشاهدة المزيد من نتائج الفيديو، يمكنكم زيارة صفحة المشروع على [OmniHands](https://OmniHand.github.io).