SymTRELLIS কী পরিবর্তন আনে
TRELLIS.2-এ flow-ভিত্তিক জেনারেশনের সময় SymTRELLIS 3D মডেলের প্রতিসাম্য নিয়ন্ত্রণ করে। এই পদ্ধতি সসীম বিন্দু-গোষ্ঠী সমর্থন করে: ঘূর্ণন, দর্পণ এবং পলিহেড্রাল।
এর জন্য বেস VAE বা flow মডেল পুনরায় প্রশিক্ষণ দিতে হয় না। প্রয়োগের ব্যবহারিক মানদণ্ড হলো জেনারেশনের সময় মডেলের প্রতিসাম্য নির্দিষ্ট করার প্রয়োজন।
ল্যাটেন্ট স্পেসে নিয়ন্ত্রণ কীভাবে কাজ করে
এই পদ্ধতি ভক্সেল ল্যাটেন্টের ওপর একটি প্রশিক্ষণযোগ্য রৈখিক অপারেটরের মাধ্যমে স্থানিক রূপান্তরের ক্রিয়াকে আনুমানিকভাবে নির্ণয় করে। এই হালকা spatial-transform latent mapper সাধারণ, প্রতিসাম্যহীন 3D ডেটা দিয়ে প্রশিক্ষিত হয়।
ODE flow-এর প্রতিটি ধাপে সমতুল্য প্রতিসাম্য রূপান্তরগুলোর জন্য বেগের পূর্বাভাস দেয়। এরপর পদ্ধতিটি এই বেগগুলোর গড় করে—লেখকেরা এই প্রক্রিয়াটিকে velocity symmetrization বলেন।
এখানে মূল বিষয় হলো জেনারেশনের প্রতিটি ধাপে গড় করা, বেস মডেল পুনরায় প্রশিক্ষণ দেওয়া নয়। নির্দিষ্ট প্রতিসাম্যের সঙ্গে জেনারেশন সামঞ্জস্য করার প্রয়োজন হলে এই পদ্ধতি উপযুক্ত।
প্রতিসাম্য কীভাবে নির্দিষ্ট করা হয়
SymTRELLIS-এ প্রতিসাম্যের স্পেসিফিকেশন দুইভাবে পাওয়া যায়:
- TRELLIS.2-এর প্রাথমিক জেনারেশন থেকে স্বয়ংক্রিয়ভাবে অনুমান করা;
- ব্যবহারকারীর দ্বারা নির্দিষ্ট করা।
নির্বাচিত স্পেসিফিকেশন ইনপুট ছবির ইঙ্গিতের বাইরে গিয়েও ইচ্ছাকৃতভাবে প্রতিসাম্যের ক্রম পরিবর্তন করতে দেয়। প্রয়োজনীয় প্রতিসাম্য যখন শুধু ছবির দ্বারা নির্ধারিত হওয়া উচিত নয়, তখন এটি গুরুত্বপূর্ণ।
ফলাফল কী দেখায়
লেখকেরা সুনির্বাচিত 266টি কঠোরভাবে প্রতিসম বস্তু নিয়ে তৈরি একটি বেঞ্চমার্কে পদ্ধতিটি পরীক্ষা করেছেন। এতে 2 থেকে 20 ক্রমের ঘূর্ণন প্রতিসাম্য এবং পলিহেড্রাল গোষ্ঠী অন্তর্ভুক্ত রয়েছে।
| তুলনা | ফলাফল |
|---|---|
| TRELLIS.2, Hunyuan3D-2.1 এবং TripoSG-এর তুলনায় প্রতিসাম্যের ত্রুটি | SymTRELLIS প্রতিসাম্যের ত্রুটির সব মেট্রিক উল্লেখযোগ্যভাবে কমায় |
| পুনর্গঠনের নির্ভুলতা | বেস মডেলের সঙ্গে তুলনীয় স্তরে বজায় থাকে |
যেসব কাজে বেস মডেলের পুনর্গঠনের নির্ভুলতা থেকে উল্লেখযোগ্য বিচ্যুতি ছাড়াই প্রতিসাম্যের ত্রুটি কমানো দরকার, সেসবের জন্য এই ফলাফল গুরুত্বপূর্ণ।
নির্বাচনের মানদণ্ড
লক্ষ্য মডেলে যখন সসীম বিন্দু-প্রতিসাম্য থাকা দরকার—ঘূর্ণন, দর্পণ বা পলিহেড্রাল—তখন এই পদ্ধতি উপযুক্ত। এর স্পেসিফিকেশন প্রাথমিক জেনারেশন থেকে পাওয়া যায় অথবা আলাদাভাবে নির্দিষ্ট করা যায়।
ইনপুট ছবির ইঙ্গিতের তুলনায় প্রতিসাম্যের ক্রম ইচ্ছাকৃতভাবে পরিবর্তন করার প্রয়োজন হলেও, তা বর্ণিত সক্ষমতার অন্তর্ভুক্ত। পদ্ধতিটি মূল্যায়নের সময় দুটি মানদণ্ডই বিবেচনা করা উচিত: প্রতিসাম্যের ত্রুটি এবং পুনর্গঠনের নির্ভুলতা।
