DreamFusion

DreamFusion هو منتج يستخدم نموذجًا نصيًا إلى صورة يسمى Imagen لتحسين مشهد ثلاثي الأبعاد.

يتميز المنتج بأخذ عينات تقطير النقاط (SDS) ، وهي طريقة لتوليد عينات من نموذج الانتشار عن طريق تحسين وظيفة الخسارة. يسمح SDS بتحسين العينات في مساحة معلمة عشوائية ، مثل مساحة ثلاثية الأبعاد.

يستخدم المنتج معلمات مشهد ثلاثي الأبعاد مشابهة لـ Neural Radiance Fields لتحديد هذا التعيين القابل للتفاضل. يضيف DreamFusion نظم تنظيمية إضافية واستراتيجيات تحسين لتحسين الهندسة ، مما ينتج عنه معايير متماسكة وعالية الجودة وهندسة السطح والعمق ونماذج NeRF يمكن الاعتماد عليها مع نموذج تظليل لامبرتي.

تتضمن حالات استخدام DreamFusion تحسين المشاهد ثلاثية الأبعاد لتطبيقات متنوعة ، مثل ألعاب الفيديو وتجارب الواقع الافتراضي وإنتاج الأفلام.