STORYANCHORS: Generating Consistent Multi-Scene Story Frames for Long-Form Narratives
Created by
Haebom
저자
Bo Wang, Haoyang Huang, Zhiying Lu, Fengyuan Liu, Guoqing Ma, Jianlong Yuan, Yuan Zhang, Nan Duan, Daxin Jiang
개요
StoryAnchors는 시간적 일관성이 강한 고품질의 다중 장면 스토리 프레임을 생성하기 위한 통합 프레임워크입니다. 과거와 미래의 맥락을 모두 통합하는 양방향 스토리 생성기를 사용하여 시간적 일관성, 캐릭터 연속성, 매끄러운 장면 전환을 보장합니다. 표준 비디오 합성과의 차별화를 위한 특정 조건을 도입하여 장면 다양성을 높이고 서사의 풍부함을 향상시킵니다. Multi-Event Story Frame Labeling과 Progressive Story Frame Training을 통합하여 전체적인 서사 흐름과 이벤트 수준의 역동성을 모두 포착하여 생성 품질을 향상시킵니다. 수정 및 확장 가능한 스토리 프레임을 지원하여 수동 수정과 더 길고 복잡한 시퀀스 생성이 가능합니다. 광범위한 실험을 통해 StoryAnchors가 일관성, 서사 일관성, 장면 다양성과 같은 주요 영역에서 기존 오픈소스 모델보다 우수한 성능을 보이며, 서사 일관성과 스토리 풍부함 측면에서는 GPT-4o와 동등한 수준의 성능을 보입니다. 결론적으로 StoryAnchors는 스토리 중심 프레임 생성의 한계를 뛰어넘어 향후 연구를 위한 확장 가능하고 유연하며 편집 가능성이 높은 기반을 제공합니다.
시사점, 한계점
•
시사점:
◦
시간적 일관성이 높은 고품질 다중 장면 스토리 프레임 생성 가능
◦
기존 오픈소스 모델 대비 향상된 일관성, 서사 일관성, 장면 다양성
◦
GPT-4o 수준의 서사 일관성 및 스토리 풍부함
◦
수정 및 확장 가능한 스토리 프레임 지원으로 장편 스토리 생성 가능
◦
향후 연구를 위한 확장 가능하고 유연한 프레임워크 제공
•
한계점:
◦
논문에서 구체적인 한계점이 명시적으로 언급되지 않음. 추가적인 실험이나 비교 분석을 통해 밝혀져야 할 부분이 있을 수 있음.
