إعادة بناء فيديو خفيف الوزن بدقة فائقة بناءً على OFCA-Transformer

REN Pengyang ,  

PANG Kai ,  

摘要

لمعالجة المشكلات الحالية في طرق تحسين دقة الفيديو الفائقة في المشاهد ذات الحركة المعقدة مثل عدم دقة محاذاة الإطارات، وعدم استخدام المعلومات الزمنية بشكل كاف، وتعقيد الحسابات في آليات الانتباه التقليدية، تقترح هذه الورقة شبكة تحسين دقة الفيديو الفائقة (OFCA-Transformer) التي تدمج الانتباه المتقاطع بتوجيه من تدفق الضوء. أولاً، تم تصميم وحدة تقدير تدفق ضوئي متعددة المقاييس وخفيفة الوزن لتوليد معلومات حركة متعددة الحبيبات؛ ثانياً، تم إدخال آلية الانتباه المتقاطع الموجهة بتدفق الضوء بشكل مبتكر، حيث يتم إنشاء نافذة انتباه محلية مركزها موقع التنبؤ بتدفق الضوء لتحقيق دمج عميق بين الأولويات الهندسية الصريحة والمدركة الضمنية للمحتوى، مما يحسّن دقة المحاذاة ويقلل بشكل ملحوظ من تعقيد الحسابات؛ أخيراً، تم بناء وحدة تجميع الميزات الهرمية لتحقيق دمج أكثر فعالية للميزات الزمكانية داخل بنية الترانسفورمر. عند عوامل التكبير ×2، ×3، ×4، تم مقارنة طريقة البحث هذه مع طرق أخرى على ثلاثة مجموعات بيانات عامة. أظهرت النتائج أن قيمة PSNR لـ OFCA-Transformer على عدة مجموعات بيانات تختلف بمقدار 0.16 ديسيبل فقط مقارنة بالطرق المتقدمة الأخرى، مع تقليل كمية معاملات النموذج بنسبة 82.8%، مما زاد من كفاءة الحساب. بالإضافة إلى ذلك، أظهرت طريقة البحث المقدمة استعادة أكثر دقة للتفاصيل والتوافق الزمني الأفضل في المشاهد ذات الحركة المعقدة، وحققت مؤشرات كمية جيدة بشكل موضوعي عند جميع عوامل التكبير.

关键词

تحسين دقة الفيديو الفائقة;ترانسفورمر;تقدير تدفق الضوء;انتباه متقاطع;محاذاة الحركة

阅读全文

以上内容由讯飞翻译自动生成,翻译内容仅供参考。对于因使用本网站翻译内容产生的相关后果,本网站不承担任何商业和法律责任。

The above content is generated by Large Model Translation. The translated content is for reference only. We do not assume any commercial or legal responsibilty for any consequences arising from the use of our website