طريقة إعادة بناء اليد ثلاثية الأبعاد القائمة على استعادة إخفاء تكييفية وإدراك ثنائي الاتجاه للطوبولوجيا والوضعية
摘要
تواجه طرق إعادة بناء شبكة اليد ثلاثية الأبعاد الحالية عدة تحديات، خاصة عند التعامل مع الإخفاء ووضعيات اليد عالية المرونة، حيث تظهر مشاكل فقدان معلومات هندسة اليد وأخطاء في الهيكل الطوبولوجي. للحفاظ على دقة وكفاءة إعادة بناء اليد ثلاثية الأبعاد في حالات الإخفاء، تقترح هذه الورقة إطار شبكة ثنائي المراحل لإعادة بناء شبكة اليد ثلاثية الأبعاد من صورة RGB أحادية العدسة بشكل مباشر وفعال. في المرحلة الأولى، تم تصميم وحدة استعادة الإخفاء التكيفية من خلال إدخال قناع وزن انتقائي قابل للتعلم وخسارة اتساق المنطقة في آلية الانتباه. تستهدف هذه الوحدة استعادة المعلومات بشكل تكييفي في مناطق الإخفاء، معززة بشكل كبير قدرة التعبير عن الخصائص في ظروف الإخفاء. في المرحلة الثانية، من خلال دمج النمذجة الطوبولوجية الثابتة والإحساس الوضعية الديناميكية، بالإضافة إلى تمرير ثنائي الاتجاه للتواء رسم بياني واهتمام جديد بإحساس دوران المفاصل، تم تقديم وحدة إدراك ثنائية الاتجاه للطوبولوجيا والوضعية. تحقق هذه الوحدة تعزيزًا تكميليًا للخصائص الثابتة والديناميكية، معززة قدرة التقاط تفاصيل خصائص المفاصل. أجرت هذه الورقة مقارنة نوعية وكمية مع الطرق المتقدمة على مجموعتي بيانات FreiHAND وInterHand2.6M. أظهرت النتائج التجريبية على مجموعة بيانات FreiHAND أن طريقة هذه الورقة خفضت PA-MPVPE إلى 6.1 ملم، وسرعة الاستنتاج وصلت إلى 39 إطارًا في الثانية؛ في مجموعة بيانات InterHand2.6M، خفضت الطريقة MPJPE إلى 8.07 ملم وMPVPE إلى 8.22 ملم. تلبي طريقة هذه الورقة متطلبات إعادة بناء اليد ثلاثية الأبعاد من حيث مقاومة الإخفاء، الوقت الحقيقي، الكفاءة، ودقة الوضعية.
关键词
إعادة بناء شبكة اليد ثلاثية الأبعاد;آلية الانتباه;شبكة التواء الرسم البياني;خسارة اتساق المنطقة;التعلم العميق
以上内容由讯飞翻译自动生成，翻译内容仅供参考。对于因使用本网站翻译内容产生的相关后果，本网站不承担任何商业和法律责任。
The above content is generated by Large Model Translation. The translated content is for reference only. We do not assume any commercial or legal responsibilty for any consequences arising from the use of our website