단어에서 세계로: LLM 에이전트를 활용한 한 줄 프롬프트의 다중 모달 디지털 스토리 변환
Author
Venue
ACM SIGGRAPH Motion, Interaction, and Games 2024
Abstract
엔터테인먼트, 교육, 마케팅 분야에서 필수적인 디지털 스토리텔링은 제작의 확장성과 유연성 측면에서 과제에 직면해 있습니다. 본 논문에서 소개하는 StoryAgent 프레임워크는 대규모 언어 모델(LLM)과 생성형 도구를 활용하여 디지털 스토리텔링을 자동화하고 정교화합니다. StoryAgent는 하향식 스토리 초안 작성과 상향식 자산 생성 방식을 채택하여 수동 개입, 상호작용적 장면 구성, 서사적 일관성 등 핵심 과제를 해결합니다. 이 프레임워크는 다양한 모달리티에 걸쳐 상호작용적이고 일관된 서사를 효율적으로 제작할 수 있게 하여, 콘텐츠 제작의 민주화를 촉진하고 사용자 참여도를 높입니다. 우리의 연구 결과는 참조 영상 없이도 일관성 있는 디지털 스토리를 생성할 수 있는 이 프레임워크의 능력을 입증하며, 이는 자동화된 디지털 스토리텔링 분야에서 중요한 진전을 의미합니다.
