بازسازی سه‌بعدی سطح تغییرشکل‌پذیر از تصاویر تک‌چشمی ۲۰۲۲
Deformable Surface 3D Reconstruction from Monocular Images 2022

بازسازی شکل سه بعدی سطوح تغییر شکل‌پذیر از یک جریان ویدئویی واحد، امکان ایجاد سیستم‌های بازسازی را فراهم می‌کند که بر روی سخت‌افزارهای رایج و بدون نیاز به دستگاه‌های تخصصی قابل اجرا هستند. با این حال، از آنجایی که اشکال سه‌بعدی مختلفی می‌توانند تقریباً یک تصویر دو بعدی یکسان داشته باشند، بازسازی شکل از یک تصویر واحد ذاتاً مبهم است.

در این بررسی، دو دسته اصلی از تکنیک‌ها را که تاکنون مؤثرترین بوده‌اند مرور خواهیم کرد: روش‌های مبتنی بر الگو که بر ایجاد تطابق با یک تصویر مرجع که شکل در آن از قبل مشخص است، تکیه دارند و تکنیک‌های «ساختار از حرکت غیر صلب» که از نقاط ردیابی‌شده در طول سکانس‌ها برای بازسازی یک شکل کاملاً ناشناخته بهره می‌برند.

در هر دو مورد، رویکرد را فرموله کرده، ابهامات ذاتی آن را مورد بحث قرار داده و راه حل‌های عملی پیشنهادی برای رفع آنها را ارائه خواهیم داد. در پایان، پیشنهاداتی برای تحقیقات آینده ارائه خواهیم کرد.

فهرست مطالب: مقدمه / رویکردهای اولیه به بازسازی غیر صلب / فرموله کردن بازسازی مبتنی بر الگو / انجام بازسازی مبتنی بر الگو / فرموله کردن ساختار از حرکت غیر صلب / انجام ساختار از حرکت غیر صلب / مسیرهای آینده

Being able to recover the shape of 3D deformable surfaces from a single video stream would make it possible to field reconstruction systems that run on widely available hardware without requiring specialized devices. However, because many different 3D shapes can have virtually the same projection, such monocular shape recovery is inherently ambiguous. In this survey, we will review the two main classes of techniques that have proved most effective so far: The template-based methods that rely on establishing correspondences with a reference image in which the shape is already known, and non-rigid structure-from-motion techniques that exploit points tracked across the sequences to reconstruct a completely unknown shape. In both cases, we will formalize the approach, discuss its inherent ambiguities, and present the practical solutions that have been proposed to resolve them. To conclude, we will suggest directions for future research. Table of Contents: Introduction / Early Approaches toNon-Rigid Reconstruction / Formalizing Template-Based Reconstruction / Performing Template-Based Reconstruction / Formalizing Non-Rigid Structure from Motion / Performing Non-Rigid Structure from Motion / Future Directions