Davidyao99/uni4d
چه کاری انجام میده؟ این پروژه یک مدل پایه‌ای بصری جدید به نام Uni4D معرفی می‌کنه که قادر به ساخت مدل‌های ۴بعدی از یک ویدیوی تکی هست. این یعنی از یک ویدیوی معمولی، می‌تونه حرکت و تغییرات فضایی اجسام رو در طول زمان به صورت سه‌بعدی و دینامیک بازسازی کنه.
کاربرد:
این فناوری می‌تونه توی حوزه‌های مختلفی مثل واقعیت افزوده (AR)، انیمیشن سینمایی، رباتیک و حتی بازی‌های ویدیویی استفاده شود. مثلاً یک شخص با گوشیش یک حرکت رو ضبط می‌کنه و سیستم یک آواتار متحرک سه‌بعدی از اون حرکت رو بسازه.
در چه شرایطی بهتره استفاده شود؟
وقتی دسترسی به تجهیزات پیچیده مثل دوربین‌های چند زاویه‌ای یا اسکنر لیزری ندارید، اما نیاز به بازسازی پویای صحنه‌های سه‌بعدی دارید. این مدل با یک ویدیوی ساده از یک دوربین، می‌تونه اطلاعات زمانی و مکانی رو ترکیب کنه و خروجی باکیفیتی تولید کنه.
چند مثال از موارد استفاده:
ساخت آواتارهای متحرک از حرکات انسان برای انیمیشن
شبیه‌سازی دینامیک اجسام در محیط‌های باز برای رباتیک
تحلیل حرکت ورزشکاران برای بهبود عملکرد ورزشی ️
استفاده در فیلم‌سازی دیجیتال برای افکت‌های ویژه بدون نیاز به استودیو موتیون کپچر
- ##4DModeling
- ##ComputerVision
- ##SingleViewReconstruction
- ##Dynamic3D
- ##AR
- ##CVPR2025
- ##FoundationModel
- ##VideoTo3D
- ##Davidyao99
- ##Uni4D