क्यूबपार्ट: एक खुल्या शब्दसंग्रहाचा, भागांनुसार नियंत्रित करता येणारा 3D जनरेटर

गेम्स आणि सिम्युलेशनमध्ये वापरल्या जाणाऱ्या इंटरॅक्टिव्ह 3D मालमत्ता सामान्यतः अ‍ॅनिमेशन, भौतिकशास्त्र आणि स्क्रिप्टेड वर्तनांना समर्थन देण्यासाठी विशिष्ट अर्थपूर्ण भागांमध्ये विभक्त केल्या जातात, तरीही बहुतेक जनरेटिव्ह 3D मॉडेल्स एकतर एकसंध मेष तयार करतात किंवा अनुप्रयोग-विशिष्ट गरजांशी जुळत नसलेली मनमानी भागविभाजन करतात. आम्ही CubePart सादर करतो, हे एक जनरेटिव्ह फ्रेमवर्क आहे जे ओपन-व्होकॅब्युलरी, भाग-नियंत्रित 3D मेष निर्मितीसाठी आहे आणि जे भाग रचना स्पष्ट इन्फरन्स-टाइम नियंत्रण सिग्नल म्हणून उघड करते. एक जागतिक टेक्स्ट प्रॉम्प्ट आणि वापरकर्ता-परिभाषित भागांची स्कीमा जी भागांच्या नावांच्या अनंत यादीत व्यक्त केलेली असते, ती दिल्यास, आमची पद्धत मेषेची एक संच तयार करते - स्कीमाच्या प्रत्येक घटकासाठी एक - जी निर्दिष्ट सेमँटिक रचनेचे पालन करत सुसंगत वस्तू बनवतात. ही क्षमता सक्षम करण्यासाठी, आम्ही मोठ्या प्रमाणावर विस्तारता येणारी डेटा पाइपलाइन सादर करतो जी एक मोठा, खुल्या शब्दसंग्रहाचा, भाग-लेबल केलेला 3D डेटासेट तयार करते, तसेच एक दोन-टप्प्यांचा जनरेटिव्ह आर्किटेक्चर देखील सादर करतो जो जागतिक आकार संश्लेषणाला भाग-स्तरीय डिकोडिंगपासून वेगळे करतो. आम्ही दाखवतो की तयार झालेली मालमत्ता थेट गेम इंजिन्समध्ये समाकलित केली जाऊ शकते आणि अॅनिमेशन व वर्तन स्क्रिप्ट्सद्वारे चालवली जाऊ शकते, ज्यासाठी कोणत्याही मॅन्युअल पोस्ट-प्रोसेसिंगची आवश्यकता नसते. प्रोजेक्ट पेज