Cube: نظرة Roblox على الذكاء ثلاثي الأبعاد

أظهرت النماذج الأساسية التي تم تدريبها على كميات هائلة من البيانات قدرات استدلال وتوليد رائعة في مجالات النصوص والصور والصوت والفيديو. هدفنا في Roblox هو بناء نموذج أساسي للذكاء ثلاثي الأبعاد، وهو نموذج يمكنه دعم المطورين في إنتاج جميع جوانب تجربة Roblox، بدءًا من إنشاء كائنات ومشاهد ثلاثية الأبعاد، مرورًا بتجهيز الشخصيات للرسوم المتحركة، وصولًا إلى إنتاج نصوص برمجية تصف سلوكيات الكائنات. نناقش ثلاثة متطلبات تصميم رئيسية لمثل هذا النموذج الأساسي ثلاثي الأبعاد، ثم نقدم خطوتنا الأولى نحو بناء مثل هذا النموذج. نتوقع أن تكون الأشكال الهندسية ثلاثية الأبعاد نوعًا أساسيًا من البيانات، ونصف حلنا لمُجزئ الأشكال ثلاثية الأبعاد. نعرض كيف يمكن استخدام مخطط التجزئة الخاص بنا في تطبيقات إنشاء النص إلى شكل، وإنشاء الشكل إلى نص، وإنشاء النص إلى مشهد. نوضح كيف يمكن لهذه التطبيقات أن تتعاون مع نماذج اللغة الكبيرة (LLMs) الحالية لإجراء تحليل المشهد والاستدلال. نختتم بمناقشة تحدد مسارنا نحو بناء نموذج أساسي موحد بالكامل للذكاء ثلاثي الأبعاد. يمكن العثور على كودنا وأوزان النموذج على: https://github.com/Roblox/cube.