# Gen3 KeyFraming (Prototype)

[Runway Research | Creativity as Search: Mapping Latent Space](https://runwayml.com/research/creativity-as-search-mapping-latent-space)

# **Gen-3 KeyFraming (Prototype)**

![Image](https://upload.cafenono.com/image/slashpagePost/20241205/121009_X8Sl3NmRAa0SaMryGv?q=80&s=1280x180&t=outside&f=webp)

( X 포스팅 전문 )

오늘 우리는 모든 잠재적 예술적 가능성에 대한 검색 과정처럼 창의적인 탐험을 다루는 초기 비디오 키프레이밍 프로토타입을 공유합니다. 이를 통해 정밀한 제어와 우연한 비선형적 발견을 통해 이 광대한 공간을 동시에 탐색할 수 있습니다.

## **그래프 구조: 잠재 공간의 창**

그래프 구조는 프로토타입의 기초입니다. 이미지는 노드로 표현되며 모델의 잠재 공간에서 웨이포인트 역할을 합니다. 이러한 노드는 다른 노드에 연결되어 에지를 생성할 수 있습니다. 에지는 잠재 공간과 시간을 거쳐 첫 번째 프레임에서 마지막 프레임으로 전환되는 비디오입니다.

## 통제와 우연의 균형

정확한 제어는 광대한 가능성의 공간을 제한하는 데 도움이 되지만, 동시에 변화와 예측 불가능성은 "행복한 사고"로 이어질 수 있습니다. 이는 정확한 제어가 주어졌다면 고려하지 않았을 가능성입니다. 이러한 균형을 맞추기 위해, 우리는 사용자가 일관된 차원에서 예측 불가능성을 허용하는 "관계적" 방식으로 이미지를 조작할 수 있는 두 가지 가능성을 제공합니다.

사용자는 "이미지 대 이미지"를 통해 선택한 이미지를 변형할 수 있습니다. 이는 원래 구성을 보존하면서 텍스트 프롬프트를 통해 스타일을 변경하고, "이미지 변형"은 원래 스타일을 유지하면서 구성을 변경합니다.

## 비선형 탐색 지원

창의적인 탐색은 거의 직선을 따르지 않습니다. 그래프 구조는 사용자가 다양한 지점에서 분기하여 가능한 대안의 새로운 포크를 만들 수 있도록 하여 자연스럽게 탐색을 제공합니다. 더 많은 탐색이 발생할수록 그래프는 자연스럽게 성장하여 다양한 실험 경로를 추적합니다.

이를 통해 사용자는 비선형 타임라인을 구성할 수 있습니다. 우리는 사용자가 비선형 타임라인을 선형 타임라인이 있는 비디오로 내보낼 수 있도록 시퀀서를 제공하며, 이는 "자신만의 모험을 선택하세요" 경험과 유사합니다.

## **오픈 워크스페이스**

그래프 구조를 넘어, 우리는 작업 공간에 어떠한 조직적 제약도 부과하지 않습니다. 사용자는 노드와 에지를 구성할 수 있는 완전한 자유를 누리며, 프로세스 요구에 따라 관련 탐색을 클러스터링하거나 고유한 창의적 실험을 분리합니다.

![Image](https://upload.cafenono.com/image/slashpagePost/20241205/112756_gSv7pfxNVHInEhfNyA?q=80&s=1280x180&t=outside&f=webp)

![Image](https://upload.cafenono.com/image/slashpagePost/20241205/114729_zlid99XVWEU57T6NVh?q=80&s=1280x180&t=outside&f=webp)

![Image](https://upload.cafenono.com/image/slashpagePost/20241205/114732_yfNu3wcbMComwhenxl?q=80&s=1280x180&t=outside&f=webp)

![Image](https://upload.cafenono.com/image/slashpagePost/20241205/114921_Av8IEazrnQWabgCW2s?q=80&s=1280x180&t=outside&f=webp)

![Image](https://upload.cafenono.com/image/slashpagePost/20241205/115033_VE5QQNa73g1Etl9CcF?q=80&s=1280x180&t=outside&f=webp)

![Image](https://upload.cafenono.com/image/slashpagePost/20241205/115129_1HPV0HHb8ygDLNTvJR?q=80&s=1280x180&t=outside&f=webp)

![Image](https://upload.cafenono.com/image/slashpagePost/20241205/115342_elVgnqT5wyoMayHHwN?q=80&s=1280x180&t=outside&f=webp)

![Image](https://upload.cafenono.com/image/slashpagePost/20241205/121116_SlAkw8ZFaL2YroqKR0?q=80&s=1280x180&t=outside&f=webp)

---

[Runway](https://twitter.com/runwayml/status/1863679848092246260)

For the site tree, see the [root Markdown](https://slashpage.com/mintbear.md).