Treści na tej stronie zostały przetłumaczone przy użyciu sztucznej inteligencji (AI) lub technologii tłumaczenia maszynowego i mogą zawierać błędy.

Skip to content

Od słów do światów: przekształcanie jednowierszowych podpowiedzi w multimodalne opowieści cyfrowe za pomocą agentów LLM

View Publication

Author

Danrui Li (Uniwersytet Rutgers), Samuel S. Sohn (Uniwersytet Rutgers), Sen Zhang (Uniwersytet Rutgers), Che-Jui Chang (Uniwersytet Rutgers), Mubbasir Kapadia (Roblox)

Venue

ACM SIGGRAPH Motion, Interaction, and Games 2024

Abstract

Cyfrowe opowiadanie historii, niezbędne w rozrywce, edukacji i marketingu, napotyka wyzwania związane ze skalowalnością i elastycznością produkcji. Przedstawiona w niniejszym artykule platforma StoryAgent wykorzystuje duże modele językowe i narzędzia generatywne do automatyzacji i udoskonalania cyfrowego opowiadania historii. Wykorzystując podejście polegające na tworzeniu szkicu historii odgórnie i generowaniu zasobów oddolnie, StoryAgent rozwiązuje kluczowe problemy, takie jak ręczna interwencja, koordynacja scen interaktywnych oraz spójność narracji. Framework ten umożliwia wydajną produkcję interaktywnych i spójnych narracji w wielu modalnościach, demokratyzując tworzenie treści i zwiększając zaangażowanie. Nasze wyniki pokazują zdolność frameworka do tworzenia spójnych cyfrowych opowieści bez filmów referencyjnych, co stanowi znaczący postęp w automatycznym cyfrowym storytellingu.