DreamFusion

DreamFusion هو منتج يستخدم نموذجًا نصيًا إلى صورة يسمى Imagen لتحسين مشهد ثلاثي الأبعاد.
يتميز المنتج بأخذ عينات تقطير النقاط (SDS) ، وهي طريقة لتوليد عينات من نموذج الانتشار عن طريق تحسين وظيفة الخسارة. يسمح SDS بتحسين العينات في مساحة معلمة عشوائية ، مثل مساحة ثلاثية الأبعاد.
يستخدم المنتج معلمات مشهد ثلاثي الأبعاد مشابهة لـ Neural Radiance Fields لتحديد هذا التعيين القابل للتفاضل. يضيف DreamFusion نظم تنظيمية إضافية واستراتيجيات تحسين لتحسين الهندسة ، مما ينتج عنه معايير متماسكة وعالية الجودة وهندسة السطح والعمق ونماذج NeRF يمكن الاعتماد عليها مع نموذج تظليل لامبرتي.
تتضمن حالات استخدام DreamFusion تحسين المشاهد ثلاثية الأبعاد لتطبيقات متنوعة ، مثل ألعاب الفيديو وتجارب الواقع الافتراضي وإنتاج الأفلام.