Self Forcing: 자기회귀 키프레임-투-비디오 생성#

Self Forcing은 고급 키프레임 기반 비디오 생성 모델입니다. Self Forcing은 설명적인 텍스트 프롬프트의 안내를 받아 시작 키프레임과 끝 키프레임 사이의 모션을 생성하여 매끄럽고 고품질의 비디오 합성을 가능하게 합니다.

KV 캐싱을 갖춘 자기회귀 비디오 확산 아키텍처를 기반으로 구축된 Self Forcing은 프레임 간 시간적으로 일관되고 신원이 보존되는 모션 생성에 탁월합니다. Self Forcing의 키프레임-텍스트 결합 접근 방식은 생성된 비디오 전반에 걸쳐 주제의 구조와 스타일을 유지하면서 유연한 전환을 가능하게 합니다.

왜 Self Forcing을 사용해야 할까요?#

Self Forcing의 특징:

• 키프레임 기반 생성: Self Forcing은 시작과 끝 참조 이미지를 사용하여 외관과 모션을 제어합니다
• 프롬프트 + 키프레임 제어: Self Forcing은 창의적 텍스트 설명과 참조 구조를 결합합니다
• 자기회귀 모션: Self Forcing은 프레임 간 부드럽고 시간적으로 일관된 전환을 제공합니다
• 신원 보존: Self Forcing은 생성된 시퀀스 전반에 걸쳐 주제 충실도를 유지합니다
• 효율적인 비디오 제작에 이상적: Self Forcing은 캐릭터 기반 스토리텔링, 영화적 애니메이션, 컨셉 비디오 합성에 완벽합니다

애니메이션, 영화적 시퀀스 또는 신원 일관성 있는 AI 비디오를 생성하든, Self Forcing은 Self Forcing 기술로 부드럽고 사실적인 모션을 보장하면서 완전한 창작 제어를 제공합니다.

입력 이미지#

이 섹션에서는 Self Forcing을 위한 시작 키프레임과 끝 키프레임 이미지를 업로드합니다. 이 두 이미지는 Self Forcing 생성 비디오의 시작과 끝 외관을 정의합니다.

• Self Forcing을 위해 제공된 Load Image 노드를 사용하여 두 참조 이미지를 업로드하세요.
• 최적의 Self Forcing 정렬과 종횡비를 위해 선택적 리사이즈 및 크롭 노드를 사용하세요.
• 적절하게 정렬되고 잘 크롭된 키프레임은 생성된 시퀀스 전반에 걸쳐 Self Forcing 모션 일관성을 향상시킵니다.

비디오 길이#

Self Forcing 비디오가 생성할 총 프레임 수를 설정합니다.

• 더 긴 프레임 수는 Self Forcing에서 키프레임 간 더 점진적이고 부드러운 전환을 허용합니다.
• 더 짧은 프레임 수는 더 빠른 Self Forcing 전환을 만듭니다.
• 일반적인 Self Forcing 범위: 원하는 길이와 모션 복잡도에 따라 16-48 프레임.

모델#

이 그룹은 Self Forcing 자기회귀 비디오 확산 모델을 로드합니다. Self Forcing 워크플로우는 자동으로 올바른 모델 버전을 선택합니다.

• Self Forcing은 KV 캐싱을 갖춘 자기회귀 롤아웃을 기반으로 구축되었습니다.
• Self Forcing은 안정적이고 시간적으로 일관된 모션 생성을 보장합니다.
• Self Forcing은 RTX 4090과 같은 고성능 GPU에서 실시간 추론을 가능하게 합니다.

프롬프트#

이 섹션에서는 Self Forcing 생성을 안내하기 위한 텍스트 프롬프트를 입력할 수 있습니다.

• 프롬프트를 키프레임과 결합하여 Self Forcing 스타일, 배경 또는 모션 컨텍스트에 영향을 줍니다.
• Self Forcing 창작 제어를 극대화하기 위해 서술적이고 명확한 언어를 사용하세요.
• 네거티브 프롬프트를 사용하여 Self Forcing에서 원치 않는 요소를 억제할 수도 있습니다.

출력#

Self Forcing 생성이 완료되면:

• Self Forcing 비디오는 ComfyUI 디렉토리 내의 Comfyui > output 폴더에 자동 저장됩니다.
• Self Forcing 파일은 구성에 따라 비디오 클립(MP4 또는 이미지 시퀀스)으로 저장됩니다.

감사의 말#

이 워크플로우는 guandeh가 개발한 Self Forcing 모델을 사용합니다. Self Forcing 워크플로우는 ComfyUI 내에서 원활한 Self Forcing 비디오 생성을 가능하게 하기 위해 kijai의 Wan Video Wrapper 노드를 통합합니다. 원본 Self Forcing 모델 개발과 통합 작업에 대해 두 저자 모두에게 감사를 표합니다.

GitHub Repository: https://github.com/guandeh17/Self-Forcing