ما الذي يغيّره SymTRELLIS
يتحكم SymTRELLIS في تناظر النماذج ثلاثية الأبعاد عند توليدها باستخدام التدفق في TRELLIS.2. وتدعم الطريقة مجموعات النقاط المنتهية: الدورانية والانعكاسية ومتعددة السطوح.
لا يتطلب ذلك إعادة تدريب نماذج VAE الأساسية أو نموذج التدفق. والمعيار العملي لاستخدام الطريقة هو الحاجة إلى تحديد تناظر النموذج أثناء التوليد.
كيف يعمل التحكم في الفضاء الكامن
تُقرّب الطريقة تأثير التحويلات المكانية باستخدام مؤثر خطي قابل للتعلّم يعمل على المتغيرات الكامنة الفوكسلية. ويُدرَّب هذا المحوّل الخفيف للمتغيرات الكامنة المكانية على بيانات ثلاثية الأبعاد عادية وغير متناظرة.
في كل خطوة من تدفق ODE، يتنبأ النموذج بالسرعات للتحويلات المتكافئة الناتجة عن التناظر. ثم تحسب الطريقة متوسط هذه السرعات — ويطلق المؤلفون على هذه العملية اسم تناظر السرعة.
العنصر الأساسي هنا هو حساب المتوسط في كل خطوة من خطوات التوليد، وليس إعادة تدريب النموذج الأساسي. وتناسب الطريقة الحالات التي يتطلب فيها الأمر مواءمة التوليد مع تناظر محدد.
كيفية تحديد التناظر
في SymTRELLIS، يمكن الحصول على مواصفات التناظر بطريقتين:
- تقديرها تلقائيًا بالاستناد إلى التوليد الأولي من TRELLIS.2؛
- تحديدها من قِبل المستخدم.
تتيح المواصفات المختارة تغيير رتبة التناظر عمدًا إلى ما يتجاوز ما توحي به الصورة المدخلة. ويكتسب ذلك أهمية عندما ينبغي ألا تستند درجة التناظر المطلوبة إلى الصورة وحدها.
ما الذي تُظهره النتائج
اختبر المؤلفون الطريقة على معيار مُنتقى خصيصًا، يضم 266 عنصرًا متناظرًا بدقة. ويشمل تناظرًا دورانيًا برتب تتراوح من 2 إلى 20، بالإضافة إلى مجموعات متعددة السطوح.
| المقارنة | النتيجة |
|---|---|
| خطأ التناظر مقارنةً بـ TRELLIS.2 وHunyuan3D-2.1 وTripoSG | يخفض SymTRELLIS جميع مقاييس خطأ التناظر بدرجة كبيرة |
| دقة إعادة البناء | تُحافَظ عليها عند مستوى مماثل للنموذج الأساسي |
تكتسب النتائج أهمية في المهام التي تتطلب تقليل خطأ التناظر دون إحداث تراجع ملحوظ في دقة إعادة البناء مقارنةً بالنموذج الأساسي.
معايير الاختيار
تكون الطريقة مناسبة عندما ينبغي أن يتمتع النموذج المستهدف بتناظر نقطي منتهٍ: دوراني أو انعكاسي أو متعدد السطوح. ويمكن الحصول على مواصفاته من التوليد الأولي أو تحديدها على نحو مستقل.
وإذا كان المطلوب تغيير رتبة التناظر عمدًا مقارنةً بما توحي به الصورة المدخلة، فإن ذلك يندرج أيضًا ضمن الإمكانات الموصوفة. وعند تقييم الطريقة، يجدر مراعاة كلا المعيارين: خطأ التناظر ودقة إعادة البناء.
