MiniMax H3 Singularity Reference To Video: ComfyUI에서 다중 참조, 정체성 보존 비디오 생성#
MiniMax H3 Singularity Reference To Video ComfyUI 워크플로우는 여러 캐릭터, 스타일, 장면 참조를 일관되고 시간적으로 안정적인 비디오로 변환합니다. 프레임 간에 주제를 보존하면서 외관, 의상, 조명, 환경에 대한 강력한 창의적 제어를 허용하도록 설계되었습니다.
간결한 두 단계 확산 레시피에 잠재 업스케일을 결합하여, 이 워크플로우는 제어된 움직임과 고품질 디테일의 균형을 유지합니다. 패션 영화, 무대 공연, 공상 과학 비네트, 그리고 정체성과 스타일링이 시작부터 끝까지 일관되게 유지되어야 하는 애니메이션 캐릭터 시퀀스에 이상적입니다.
ComfyUI MiniMax H3 Singularity Reference To Video 워크플로우의 주요 모델#
- MiniMax-h3 Singularity v1.3 (reference-to-video checkpoint) 텍스트 프롬프트와 이미지 참조를 융합하여 강력한 정체성과 스타일 보존과 함께 시간적으로 일관된 클립을 생성하는 커뮤니티 reference-to-video 모델입니다. Model card
- CLIP 텍스트 인코더 프롬프트를 비디오 모델이 이해할 수 있는 의미적 공간으로 매핑하여 구성, 조명, 움직임의 프롬프트 지시를 가능하게 합니다. CLIP의 텍스트-이미지 정렬에 대한 배경은 원본 논문을 참조하세요: Learning Transferable Visual Models From Natural Language Supervision.
- 체크포인트와 호환되는 오토인코더 (VAE) 프레임을 빠른 확산을 위해 잠재 공간에 인코딩하고, 세부 사항을 유지하면서 최종 잠재를 다시 RGB로 디코딩합니다.
ComfyUI MiniMax H3 Singularity Reference To Video 워크플로우 사용 방법#
이 ComfyUI 그래프는 명확한 경로를 따릅니다: 참조와 프롬프트를 수집하고, 정체성과 움직임을 고정하기 위한 저비용 기본 패스를 생성하고, 디테일을 위한 잠재 업스케일을 수행하고, 선명도를 위해 정제한 후, 비디오로 프레임을 조립합니다.
참조 및 프롬프트 설정#
주제의 역할을 커버하는 여러 참조 이미지를 제공하세요 (정체성을 위한 정면 또는 3/4 보기), 예술 방향을 전달하는 스타일 프레임, 환경 또는 팔레트를 위한 선택적 장면 참조를 제공합니다. 얼굴을 가리지 않고 적당히 선명하게 유지하여 모델이 정체성을 앵커링할 수 있도록 하세요. 주제, 의상, 설정, 조명 이름을 포함한 간결한 긍정적 프롬프트를 작성하고, 싫어하는 아티팩트를 배제하기 위한 짧은 부정적 프롬프트를 작성하세요. 여러 샷을 계획할 경우, 프롬프트를 안정적으로 유지하고 연속성을 유지하기 위해 변경해야 하는 부분만 조정하세요. 워크플로우는 프롬프트와 모든 참조를 혼합하여 주제가 프레임 간에 일관되게 읽히도록 합니다.
기본 생성 패스#
기본 패스는 주제의 유사성, 포즈, 넓은 움직임을 설정하면서 단계에서 경제적입니다. 미세 디테일을 신뢰할 수 있는 정체성과 안정적인 움직임으로 교환하여 반복적 탐색에 적합하게 합니다. 실행 간 재현성을 위해 시드를 설정하고 주제가 드리프트할 경우에만 안내 강도를 조정하세요. 전체적인 움직임과 구도가 마음에 들면, 동일한 정체성을 후속 단계로 가져갈 수 있도록 시드를 고정하세요. 주제가 여전히 흔들릴 경우, 가장 관련성이 높은 참조 이미지를 강화하거나 프롬프트를 단순화하세요.
잠재 업스케일#
잠재 업스케일 단계는 세부 사항이 도입되기 전에 잠재 공간에서 작업 해상도를 확대합니다. 이 시점에서 업스케일링은 기본 패스에서 승인된 움직임을 보존하면서 선명한 가장자리, 머리카락 디테일, 직물 질감을 위한 여유 공간을 만듭니다. 업스케일이 잠재에서 발생하기 때문에 새로운 움직임 떨림을 도입하지 않고 디테일을 추가합니다. 더 높은 해상도로 출력하려는 경우, 이 단계는 정제를 위한 깨끗한 픽셀을 준비하는 레버입니다. 시드와 참조를 변경하지 않아야 연속성을 보장할 수 있습니다.
정제 패스#
정제 패스는 구성이나 움직임을 다시 작성하지 않고 질감, 윤곽, 작은 특징을 선명하게 합니다. 기본 패스를 재구상하기보다는 향상시키기 위해 의도적으로 간결하게 만들어, 참조에서 정체성과 스타일을 보존합니다. 이 패스를 사용하여 가죽 광택, 스팽글, 또는 공상 과학 패널링과 같은 물질 속성을 끌어내고 얼굴과 눈의 흐림을 줄이세요. 과도한 선명화나 깜박임이 발생하면, 프롬프트 강도를 약간 낮추거나 정제 패스를 적용하는 강도를 줄이세요. 출력은 인코딩할 준비가 된 깨끗하고 일관된 프레임 세트입니다.
조립 및 내보내기#
최종 단계는 선택한 프레임 속도와 해상도로 프레임을 비디오 클립으로 묶습니다. 주제의 움직임에 적합한 지속 시간과 fps를 선택하세요; 느리고 신중한 움직임은 중간 프레임 속도에서 가장 잘 보입니다. MP4 또는 WebM과 같은 일반 컨테이너에 저장하여 쉽게 공유하세요. 시드, 참조, 프롬프트 노트로 변화를 비교할 수 있도록 출력물을 체계적으로 명명하세요. 샷을 함께 편집하려면 동일한 시드로 몇 가지 테이크를 내보내서 컷 사이에서 정체성을 고정하세요.
선택적 추가 기능#
- 역할별로 참조를 큐레이팅하세요: 정체성을 위한 1-2개, 스타일을 위한 1개, 환경을 위한 1개. 참조 간에 상충되는 조명을 혼합하지 마세요.
- 얼굴이 프레임을 지배하도록 정체성 참조를 위한 타이트한 크롭을 사용하세요; 스타일 또는 장면 프레임은 외관과 팔레트를 위해 더 넓게 사용하세요.
- 프롬프트를 모듈화하세요. 카메라 각도나 배경과 같이 샷마다 변경되는 부분만 교체하여 정체성을 유지하세요.
- 움직임과 유사성을 검증하기 위해 짧은 클립으로 시작한 후, 외관에 만족하면 지속 시간을 확장하세요.
- 테이크 간의 강력한 연속성이 필요하면 동일한 시드를 재사용하고 가장 영향력 있는 참조 이미지를 변경하지 마세요.
이 MiniMax H3 Singularity Reference To Video 워크플로우는 큐레이팅된 참조를 시네마틱한 정체성을 유지하는 비디오로 직접 ComfyUI 내에서 빠르고 반복 가능한 방법으로 변환할 수 있습니다.
감사의 말#
이 워크플로우는 다음 작업 및 리소스를 구현하고 확장합니다. 우리는 워크플로우 소스를 제공한 RunningHub와 MiniMax H3 Singularity 모델을 위한 WarmBloodAban의 기여와 유지에 대해 감사드립니다. 권위 있는 세부 사항은 아래 링크된 원본 문서 및 저장소를 참조하세요.
리소스#
- RunningHub/워크플로우 소스
- 문서 / 릴리즈 노트: 워크플로우 소스
- WarmBloodAban/Minimax-h3_Singularity
- Hugging Face: WarmBloodAban/Minimax-h3_Singularity
참고: 참조된 모델, 데이터셋, 코드의 사용은 저자 및 유지 관리자가 제공하는 각자의 라이선스 및 조건에 따릅니다.