Perjalanan Roblox Menuju AI Generatif 4D

• Roblox sedang mengembangkan AI generatif 4D, melampaui objek 3D tunggal menuju interaksi dinamis. 
• Mengatasi tantangan 4D akan memerlukan pemahaman multimodal yang mencakup penampilan, bentuk, fisika, dan skrip.
• Alat-alat awal yang menjadi fondasi sistem 4D kami telah mempercepat proses pembuatan di platform ini.

Roblox memberdayakan para kreator untuk membangun pengalaman 3D yang imersif, avatar, dan aksesori dengan menyediakan alat, layanan, dan dukungan yang mereka butuhkan untuk mewujudkan ide-ide mereka. Para kreator inilah yang membangun konten dinamis di platform kami, yang melibatkan lebih dari 77 juta pengguna aktif harian (per Q1 2024). Melalui aplikasi Roblox Studio gratis kami, kami telah merilis serangkaian alat AI generatif yang dirancang khusus untuk alur kerja Roblox dan dilatih menggunakan konten spesifik Roblox.

Alat-alat ini membuat proses pembuatan menjadi lebih mudah, efisien, dan menyenangkan bagi para ahli maupun pemula. Assistant memungkinkan pengeditan ruang kerja 3D, Animation Capture memungkinkan perekaman gerakan wajah dan tubuh, Code Assist membantu pengeditan dan pembuatan skrip, Material Generator memungkinkan penataan tampilan material, dan Texture Generator memungkinkan pemetaan tekstur khusus aset. Masing-masing alat AI generatif ini meningkatkan satu bagian dari proses kreatif 3D.

Secara bersama-sama, alat-alat ini memperluas kemampuan kreator dan mengurangi waktu dari konsep hingga penyelesaian. Kami mengembangkan alat-alat ini dengan memanfaatkan terobosan riset inovatif kami sendiri serta solusi terbaik dari ekosistem AI yang lebih luas. Alat-alat ini menangani pembuatan aset individu dalam 1D (skrip), 2D (permukaan), dan 3D (ruang). Kami memamerkan beberapa hasil dari laboratorium generasi dan pengeditan geometri 3D kami di berbagai konferensi riset internasional, termasuk Roblox Developers Conference kami sendiri.

Di seluruh industri, 1D dan 2D sudah menjadi standar terdepan, sedangkan 3D berada di ujung tombak AI generatif. Masing-masing merupakan tantangan yang semakin signifikan yang terus mendorong kemajuan teknis yang menarik. Karena kita hidup di ruang 3D, mungkin tampak seolah-olah itulah tantangan AI generatif yang paling mutakhir. Namun, berdasarkan kebutuhan komunitas kami, visi kami untuk pekerjaan ini melampaui batas tersebut.

Di Mana Kami Saat Ini

Kami sedang berupaya mewujudkan AI generatif 4D, di mana dimensi keempat adalah interaksi. Kekuatan platform online Roblox terletak pada interaksi—antara orang, objek, dan lingkungan. Berbeda dengan game video online tradisional, mesin runtime Roblox yang kuat memanfaatkan model pemrograman dan simulasi unik yang berfokus pada interaksi. Model ini terinspirasi oleh konsep metaverse, di mana elemen-elemen bertemu dalam cara yang kompleks, banyak-ke-banyak, dan spontan, bukan dalam cara yang ditentukan dan terbatas. 

Alat AI generatif 1D, 2D, dan 3D menghasilkan aset individu. Tantangan yang kami hadapi dengan AI generatif 4D adalah menghidupkan aset-aset tersebut dengan cara yang memungkinkan interaksi tanpa batasan yang sesuai dengan platform kami. Ini berarti, misalnya, bahwa avatar bukan hanya bentuk dan warna—tetapi juga kerangka, animasi, dan kemampuan untuk memegang alat serta menjaga keseimbangan. Avatar tersebut dapat mengenakan pakaian yang tidak dirancang khusus untuknya dan yang secara otomatis menyesuaikan diri agar pas sempurna serta melacak semua gerakan. Alat Avatar AutoSetup baru kami adalah contoh awal bagaimana AI generatif dapat membantu mengotomatiskan jenis pembuatan ini. Pengembang kini dapat menyelesaikan proses ini dalam hitungan menit, bukan jam atau hari.

Sebuah mobil sport bukan hanya bentuk yang ramping dan cat permukaannya—tetapi juga mesin, bagian-bagian yang dapat bergerak, dan rig fisika yang memungkinkannya melaju kencang di jalanan virtual dengan presisi dan kontrol. Dalam setiap kasus, objek diperluas dari 3D untuk berinteraksi dengan semua bagiannya melalui fisika dan dengan pengguna melalui avatar mereka.

Setiap elemen 4D yang sangat interaktif ini dapat ditambahkan ke dalam lingkungan yang lebih besar di mana AI generatif menyelaraskan gaya setiap elemen dan menyuntikkan dukungan interaktif antara objek-objek dan dengan lingkungan. Kini, pengguna, melalui avatar mereka, dapat berkendara dalam balapan jalanan dengan modifikator kerusakan dan skor tertinggi, serta meluncur hingga berhenti di toko mode bermerek, tempat mereka berbelanja pakaian baru untuk merayakan kemenangan mereka.

Saat ini, menciptakan pengalaman semacam itu memerlukan pembuatan manual kode sumber skrip, struktur ruang kerja dan model data, geometri 3D, animasi, serta material. Alat AI generatif yang kami miliki saat ini membantu dalam setiap bagian dari alur kerja tersebut. Kami sedang membangun sistem yang akan menghubungkan semua elemen ini dan menghasilkannya secara bersamaan. Untuk mencapai hal ini, kami harus melatih sistem AI generatif 4D kami secara multimodal, artinya melintasi berbagai jenis data secara bersamaan. Hal ini sudah dilakukan untuk gambar dan teks, yang menjadi dasar Material Generator. Memungkinkan interaksi dan menambahkan optimizer khusus untuk fisika adalah cara kami mencapai tingkat kemampuan 4D berikutnya.

Hanya dalam setahun terakhir, kami telah melihat perubahan besar dalam cara konten dibuat di Roblox. Ke depan, kami melihat masa depan di mana siapa pun, di mana pun, dapat mewujudkan ide hanya dengan mengetik atau mengucapkan perintah. Untuk mencapainya, kami harus mulai mengatasi beberapa tantangan yang akan kami hadapi di perjalanan.

Tantangan yang Menanti

Eksperimen yang kami bagikan di atas akan tersedia dalam waktu dekat. Lebih jauh lagi, kami menghadapi tiga tantangan jelas yang perlu kami atasi: 

1. Fungsional: Objek yang dibuat oleh alat AI generatif masa depan ini harus fungsional. Ini tentang sistem yang melihat truk atau pesawat dengan bentuk 3D — dan memperlakukannya bukan sebagai objek tertutup dan tidak transparan. Tanpa campur tangan pencipta, sistem dapat secara otomatis mengenali bagian mana yang memerlukan sendi, atau di mana jaring (mesh) perlu dibuka.

Ini adalah masalah AI tingkat manusia yang harus dipecahkan oleh sistem ini—misalnya, mencari penempatan roda yang benar, lalu menambahkan poros untuk roda agar beroperasi seperti di dunia fisik. Serta mencari lokasi pintu, memotong lubang, dan menambahkan engsel agar pintu dapat dibuka dan ditutup.

2. Interaktif: Objek yang dibuat dengan AI generatif masa depan ini juga harus mampu tidak hanya berfungsi secara mandiri tetapi juga berinteraksi dengan objek lain di lingkungan. Jadi, setelah sistem menciptakan mobil dengan pintu yang terbuka dan roda yang berputar, sistem tersebut perlu memahami fisika dunia tempat mobil tersebut ditempatkan. Bagaimana kendaraan bergerak di medan tersebut? Jika menabrak batu besar, di mana dan bagaimana kendaraan itu hancur, berdasarkan ukuran batu dan kecepatan kendaraan?

Tantangan kompleks ini memerlukan baik objek yang dibuat maupun lingkungan atau objek yang berinteraksi dengannya untuk memahami fisika satu sama lain. Beruntung, Roblox memiliki keunggulan dalam hal ini, karena platform ini dibangun sebagai mesin fisika, yang berarti semua objek dalam pengalaman dapat bersifat fisik. Ketika AI generatif menciptakan objek 4D, sifat-sifat fisik seperti bahan, massa, dan kekuatan juga akan ditambahkan untuk mempersiapkannya berinteraksi dengan objek-objek berbasis fisika lainnya di dunia.

3. Dapat Dikendalikan: Saat ini, kita berinteraksi dengan AI generatif menggunakan prompt. Ini adalah ilmu yang belum sempurna, mirip dengan permainan mencari harta karun. Seseorang yang meminta gambar kelinci bisa mendapatkan beragam hasil: kelinci sungguhan, kelinci Paskah cokelat, kelinci kartun, lukisan kelinci, atau ilustrasi kelinci yang mengenakan mantel. Jadi, kita menyempurnakan prompt, meminta gambar fotorealistik atau gambar “dalam gaya” tertentu saat kita menyesuaikan visi yang ada di kepala kita. Ini membutuhkan waktu dan upaya berulang untuk mendekati apa yang kita cari.

Bayangkan mencoba mengikuti proses ini untuk objek 3D yang berfungsi dan berinteraksi dengan objek lain, seperti truk dalam contoh di atas. Rekayasa prompt pada tingkat ini akan menjadi sangat kompleks—bukan sesuatu yang dapat digunakan dengan mudah oleh siapa pun. Untuk mewujudkan ide seorang kreator, kita membutuhkan cara yang lebih cepat dan mudah untuk berkomunikasi dan menyempurnakan, pada dasarnya berkolaborasi dengan asisten AI yang lebih seperti mitra dan bukan sekadar perburuan harta karun. 

Ini adalah tantangan industri secara luas, dan banyak perusahaan sedang bekerja untuk meningkatkan kontrol dalam AI generatif. Kami telah membuat kemajuan di sini dengan alat seperti ControlNet, yang meningkatkan kontrol dengan memungkinkan kreator memberikan kondisi input tambahan di luar sekadar prompt teks. Saat ini kami sedang menjajaki metode lain yang menjanjikan untuk alur kerja yang memuaskan, seperti membuat AI berhenti sejenak setelah langkah kritis untuk menunggu masukan pengguna. Namun, kami masih memiliki jalan panjang untuk mencapai pengalaman yang mulus.

Kami antusias dengan dampak yang telah kami lihat sejauh ini dan bahkan lebih antusias dengan apa yang akan datang. Dibandingkan dengan pembuat konten yang tidak menggunakan versi beta Material Generator, mereka yang menggunakannya telah meningkatkan penggunaan variasi material berbasis fisika (PBR) lebih dari 100 persen—naik dari sedikit di atas seribu pada Maret 2023 menjadi lebih dari dua ribu pada Juni 2024. Per 2 Juni 2024, para kreator telah mengadopsi sekitar 535 juta karakter kode yang disarankan oleh Code Assist. 

Seiring kami mengatasi tantangan di jalan menuju 4D, para kreator kami akan dapat menciptakan lebih banyak dan lebih cepat. Kami juga mengharapkan keragaman pengalaman yang lebih besar di Roblox seiring kami memudahkan lebih banyak orang untuk menjadi kreator. Apa yang mereka bangun dan cara mereka melakukannya akan menunjukkan kepada kami di mana harus berinvestasi dalam alat dan algoritma AI baru untuk memberdayakan kreator baru ini, bersama dengan komunitas kami yang sudah ada. 

Dengan AI generatif 4D, Roblox telah membuka cakrawala baru untuk pembuatan pengalaman dan aset. Meskipun tantangannya baru, proses inovasi kami telah terasah dengan baik. Kami menggabungkan tim penelitian dan pengembangan internal terbaik kami, kolaborasi dengan universitas, dan iterasi cepat pada prototipe melalui kemitraan dengan komunitas kami.