ลูกบาศก์: มุมมองของปัญญาประดิษฐ์ 3 มิติใน Roblox

โมเดลพื้นฐานที่ได้รับการฝึกฝนจากข้อมูลจำนวนมหาศาลได้แสดงให้เห็นถึงความสามารถในการให้เหตุผลและการสร้างที่น่าทึ่งในโดเมนของข้อความ, ภาพ, เสียง และวิดีโอ เป้าหมายของเราที่ Roblox คือการสร้างโมเดลพื้นฐานเช่นนี้สำหรับปัญญาประดิษฐ์ 3 มิติ, โมเดลที่สามารถสนับสนุนนักพัฒนาในการผลิตทุกแง่มุมของประสบการณ์ Roblox ตั้งแต่การสร้างวัตถุและฉาก 3 มิติ ไปจนถึงการติดตั้งตัวละครสำหรับการเคลื่อนไหว และการผลิตสคริปต์โปรแกรมที่อธิบายพฤติกรรมของวัตถุ เราจะหารือเกี่ยวกับข้อกำหนดการออกแบบที่สำคัญสามประการสำหรับแบบจำลองฐานราก 3D ดังกล่าว และจากนั้นเราจะนำเสนอขั้นตอนแรกของเราในการสร้างแบบจำลองเช่นนี้ เราคาดหวังว่ารูปทรงเรขาคณิต 3D จะเป็นประเภทข้อมูลหลัก และเราจะอธิบายการแก้ปัญหาของเราสำหรับตัวแบ่งส่วนรูปทรง 3D เราจะแสดงให้เห็นว่าแผนการแบ่งส่วนของเราสามารถนำไปใช้ในแอปพลิเคชันสำหรับการสร้างข้อความเป็นรูปทรง การสร้างรูปทรงเป็นข้อความ และการสร้างฉากจากข้อความได้อย่างไร เราสาธิตว่าแอปพลิเคชันเหล่านี้สามารถทำงานร่วมกับแบบจำลองภาษาขนาดใหญ่ที่มีอยู่ (LLMs) เพื่อทำการวิเคราะห์ฉากและเหตุผลได้อย่างไร เราสรุปด้วยการอภิปรายเกี่ยวกับเส้นทางของเราในการสร้างแบบจำลองพื้นฐานที่รวมเป็นหนึ่งเดียวอย่างสมบูรณ์สำหรับปัญญาประดิษฐ์ 3 มิติ โค้ดและน้ำหนักของแบบจำลองของเราสามารถพบได้ที่: https://github.com/Roblox/cube