SymTRELLIS क्या बदलता है
SymTRELLIS, TRELLIS.2 में flow-आधारित जनरेशन के दौरान 3D मॉडल की सममिति को नियंत्रित करता है। यह विधि सीमित बिंदु समूहों को सपोर्ट करती है: घूर्णी, दर्पणीय और बहुफलकीय।
इसके लिए मूल VAE या flow मॉडल को फिर से प्रशिक्षित करने की आवश्यकता नहीं होती। इसे लागू करने का व्यावहारिक मानदंड यह है कि जनरेशन के दौरान मॉडल की सममिति निर्धारित करनी हो।
लेटेंट स्पेस में नियंत्रण कैसे काम करता है
यह विधि वॉक्सेल लेटेंट्स पर एक प्रशिक्षित रैखिक ऑपरेटर का उपयोग करके स्थानिक रूपांतरणों की क्रिया का सन्निकटन करती है। यह हल्का spatial-transform latent mapper सामान्य, गैर-सममित 3D डेटा पर प्रशिक्षित होता है।
ODE flow के हर चरण में, विधि सममिति के समतुल्य रूपांतरणों के लिए वेगों का अनुमान लगाती है। फिर यह उन वेगों का औसत निकालती है—लेखक इस प्रक्रिया को velocity symmetrization कहते हैं।
यहाँ मुख्य तत्व जनरेशन के हर चरण में औसत निकालना है, न कि मूल मॉडल को फिर से प्रशिक्षित करना। यह विधि तब उपयुक्त है, जब जनरेशन को दी गई सममिति के अनुरूप बनाना हो।
सममिति कैसे निर्धारित की जाती है
SymTRELLIS में सममिति विनिर्देश दो तरीकों से प्राप्त किया जा सकता है:
- TRELLIS.2 के शुरुआती जनरेशन से इसका स्वचालित अनुमान लगाकर;
- उपयोगकर्ता द्वारा इसे निर्धारित करके।
चुना गया विनिर्देश, इनपुट छवि के संकेत से परे जाकर सममिति की क्रम-संख्या को जानबूझकर बदलने की सुविधा देता है। यह तब महत्वपूर्ण है, जब वांछित सममिति केवल छवि से निर्धारित नहीं होनी चाहिए।
नतीजे क्या दिखाते हैं
लेखकों ने इस विधि का परीक्षण 266 सख्ती से सममित वस्तुओं वाले एक विशेष रूप से चुने गए बेंचमार्क पर किया। इसमें 2 से 20 तक की क्रम-संख्या वाली घूर्णी सममिति और बहुफलकीय समूह शामिल हैं।
| तुलना | परिणाम |
|---|---|
| TRELLIS.2, Hunyuan3D-2.1 और TripoSG की तुलना में सममिति त्रुटि | SymTRELLIS सममिति त्रुटि के सभी मेट्रिक्स को काफी कम करता है |
| पुनर्निर्माण की सटीकता | मूल मॉडल के तुलनीय स्तर पर बनी रहती है |
ये नतीजे उन कार्यों के लिए महत्वपूर्ण हैं, जहाँ मूल मॉडल की पुनर्निर्माण सटीकता से उल्लेखनीय रूप से समझौता किए बिना सममिति त्रुटि घटानी हो।
चयन के मानदंड
यह विधि तब उपयुक्त है, जब लक्षित मॉडल में सीमित बिंदु सममिति होनी चाहिए: घूर्णी, दर्पणीय या बहुफलकीय। इसका विनिर्देश शुरुआती जनरेशन से प्राप्त किया जा सकता है या अलग से निर्धारित किया जा सकता है।
अगर इनपुट छवि के संकेत के सापेक्ष सममिति की क्रम-संख्या को जानबूझकर बदलना हो, तो यह भी बताई गई क्षमताओं में शामिल है। विधि का मूल्यांकन करते समय, दोनों मानदंडों पर विचार करना चाहिए: सममिति त्रुटि और पुनर्निर्माण की सटीकता।
