Содержимое этого сайта переведено с помощью искусственного интеллекта (ИИ) или технологии машинного перевода и может содержать ошибки.

Skip to content

От слов к мирам: преобразование однострочных подсказок в мультимодальные цифровые истории с помощью агентов LLM

View Publication

Author

Данруй Ли (Университет Рутгерса), Сэмюэл С. Сон (Университет Рутгерса), Сэнь Чжан (Университет Рутгерса), Че-Цзюй Чанг (Университет Рутгерса), Муббасир Кападия (Roblox)

Venue

ACM SIGGRAPH «Движение, взаимодействие и игры» 2024

Abstract

Цифровое повествование, играющее важную роль в сфере развлечений, образования и маркетинга, сталкивается с проблемами масштабируемости и гибкости производства. Представленная в данной статье платформа StoryAgent использует крупные языковые модели и генеративные инструменты для автоматизации и совершенствования цифрового повествования. Используя подход, сочетающий нисходящее составление сюжета и восходящее создание ресурсов, StoryAgent решает такие ключевые проблемы, как необходимость ручного вмешательства, координация интерактивных сцен и повествовательная согласованность. Данная платформа позволяет эффективно создавать интерактивные и последовательные повествования в различных форматах, делая создание контента доступным для широкого круга пользователей и повышая вовлеченность аудитории. Наши результаты демонстрируют способность платформы создавать связные цифровые истории без использования эталонных видеороликов, что знаменует собой значительный прорыв в области автоматизированного цифрового сторителлинга.