Cube: Roblox'tan 3D Zeka Bakışı

Büyük miktarda veri üzerinde eğitilmiş temel modeller, metin, görüntü, ses ve video alanlarında olağanüstü akıl yürütme ve üretme yetenekleri sergilemiştir. Roblox'taki hedefimiz, 3D zeka için böyle bir temel model oluşturmaktır; bu model, geliştiricilerin 3D nesneler ve sahneler oluşturmaktan animasyon için karakterleri donatmaya ve nesne davranışlarını tanımlayan programlama komut dosyaları üretmeye kadar Roblox deneyiminin tüm yönlerini üretmelerine destek olabilir. Böyle bir 3D temel model için üç temel tasarım gereksinimini tartışıyor ve ardından böyle bir model oluşturmaya yönelik ilk adımımızı sunuyoruz. 3D geometrik şekillerin temel bir veri türü olacağını öngörüyoruz ve 3D şekil tokenizer için çözümümüzü açıklıyoruz. Tokenizasyon şemamızın metinden şekle, şekilden metne ve metinden sahneye üretim uygulamalarında nasıl kullanılabileceğini gösteriyoruz. Bu uygulamaların, sahne analizi ve akıl yürütme gerçekleştirmek için mevcut büyük dil modelleriyle (LLM'ler) nasıl işbirliği yapabileceğini gösteriyoruz. Son olarak, 3D zeka için tamamen birleştirilmiş bir temel model oluşturma yolumuzu özetleyen bir tartışma ile sonlandırıyoruz. Kodumuz ve model ağırlıklarımız şu adreste bulunabilir: https://github.com/Roblox/cube.