Bu sitedeki içerik yapay zeka (AI) veya makine çeviri teknolojisi kullanılarak çevrilmiştir ve hatalar içerebilir.

Skip to content

Kelimelerden Dünyalara: LLM Ajanlarıyla Tek Satırlık İpuçlarını Çok Modlu Dijital Hikayelere Dönüştürmek

View Publication

Author

Danrui Li (Rutgers Üniversitesi), Samuel S. Sohn (Rutgers Üniversitesi), Sen Zhang (Rutgers Üniversitesi), Che-Jui Chang (Rutgers Üniversitesi), Mubbasir Kapadia (Roblox)

Venue

ACM SIGGRAPH Hareket, Etkileşim ve Oyunlar 2024

Abstract

Eğlence, eğitim ve pazarlamada vazgeçilmez olan dijital hikaye anlatımı, üretim ölçeklenebilirliği ve esnekliği konusunda zorluklarla karşı karşıyadır. Bu makalede tanıtılan StoryAgent çerçevesi, dijital hikaye anlatımını otomatikleştirmek ve iyileştirmek için Büyük Dil Modelleri ve üretken araçlar kullanır. StoryAgent, yukarıdan aşağıya hikaye taslağı oluşturma ve aşağıdan yukarıya varlık üretme yaklaşımını kullanarak manuel müdahale, etkileşimli sahne düzenleme ve anlatı tutarlılığı gibi temel sorunları ele almaktadır. Bu çerçeve, birden fazla modaliteye yayılan etkileşimli ve tutarlı anlatıların verimli bir şekilde üretilmesini sağlayarak içerik oluşturmayı demokratikleştirir ve katılımı artırır. Sonuçlarımız, çerçevenin referans videolar olmadan tutarlı dijital hikayeler üretme yeteneğini göstermekte ve otomatikleştirilmiş dijital hikaye anlatımında önemli bir ilerlemeyi işaret etmektedir.