Hunyuan Video | Image-Prompt to Video

Hunyuan Video는 폐쇄형 시스템의 지배력을 도전하는 오픈 소스 기반 모델로, 최첨단 텍스트-비디오 생성 기능을 제공합니다. 대규모 데이터 큐레이션, 적응형 아키텍처 설계, 최적화된 인프라에서의 혁신을 바탕으로 Hunyuan Video는 시각적 품질의 새로운 기준을 세웁니다.

Hunyuan Video는 주로 텍스트-비디오 생성에 중점을 두지만, Hunyuan IP2V 워크플로우는 동일한 모델을 통해 이미지와 텍스트 프롬프트를 동적인 비디오로 변환하여 이 기능을 확장합니다. 이 접근 방식은 시각적 참조를 사용하여 콘텐츠 생성을 유도할 수 있는 대안적인 방법을 제공합니다.

이미지와 프롬프트를 결합하여 Hunyuan IP2V는 입력의 주요 특성을 유지하면서 동작을 생성하여 AI 애니메이션, 개념 시각화, 예술적 스토리텔링에 유용한 도구가 됩니다. 동적인 장면, 스타일화된 움직임, 정적인 비주얼을 애니메이션 시퀀스로 확장하는 작업을 하든, Hunyuan Video의 프레임워크는 고품질 결과를 위한 효율적인 경로를 제공합니다.

Hunyuan Video - IP2V 워크플로우를 사용하는 방법?

그룹은 명확성을 위해 색상으로 구분됩니다:

1. 녹색 - 입력
2. 보라색 - 모델
3. 핑크 - Hunyuan 샘플러
4. 빨간색 - VAE + 디코딩
5. 회색 - 출력

녹색 노드에서 입력(이미지 및 텍스트)을 업로드하고, 핑크 샘플러 노드에서 지속 시간 및 해상도와 같은 비디오 설정을 조정하십시오.

입력 1 - 이미지

비슷한 결과를 원하는 장소, 사람 또는 객체의 참조 이미지를 업로드하십시오.

입력 2 - 텍스트

첫 번째 텍스트 상자에 프롬프트를 입력하고 <image> 라는 키워드를 사용하여 이미지를 포함하십시오.

예를 들어, 입력이 "빈 거리"이고 여성을 추가하고 싶다면, 프롬프트는 "A portrait of a woman, background is <image>." 이 됩니다.

샘플러

다음을 조정할 수 있습니다:

• 이미지 해상도 - 최대 1280px 720px이며, 더 많은 VRAM이 필요합니다.
• 프레임 - 프레임 수를 설정합니다 (24 프레임 = 1 초).

모델

이 그룹에서는 모델이 첫 실행 시 자동으로 다운로드됩니다. 임시 저장소에서 다운로드가 완료되기까지 3-5분을 허용하십시오.

링크:

1. Diffusion: https://huggingface.co/Kijai/HunyuanVideo_comfy/blob/main/hunyuan_video_FastVideo_720_fp8_e4m3fn.safetensors

• ComfyUI > models > diffusion_models

3. Vae: https://huggingface.co/Kijai/HunyuanVideo_comfy/blob/main/hunyuan_video_vae_bf16.safetensors

• ComfyUI > models > vae

출력

렌더링된 비디오는 Comfyui의 Outputs 폴더에 저장됩니다.

Hunyuan IP2V 워크플로우를 통해 이제 텍스트 기반 비디오 생성에 국한되지 않고, 이미지를 생동감 있게 움직임과 스타일로 표현할 수 있습니다. AI 영화 제작, 디지털 아트, 창의적인 스토리텔링을 위해, 이 워크플로우는 이전보다 더 많은 제어로 비전을 형성할 수 있는 힘을 제공합니다.