Hunyuan Video | Image-Prompt to Video

Hunyuan Video est un modèle open-source de base qui défie la domination des systèmes fermés en offrant des capacités de génération de texte en vidéo de pointe. Construit sur des innovations en matière de curation de données à grande échelle, de conception architecturale adaptative et d'infrastructure optimisée, Hunyuan Video établit de nouvelles références en matière de qualité visuelle.

Bien que Hunyuan Video se concentre principalement sur la génération de texte en vidéo, le flux de travail Hunyuan IP2V étend cette capacité en convertissant une image et une invite de texte en vidéo dynamique à travers le même modèle. Cette approche permet aux utilisateurs de diriger la création de contenu en utilisant des références visuelles, offrant une méthode alternative pour la production de contenu pilotée par l'IA.

En combinant une image avec une invite, Hunyuan IP2V génère du mouvement tout en préservant les caractéristiques clés de l'entrée, en faisant un outil utile pour l'animation IA, la visualisation de concepts et la narration artistique. Que ce soit pour créer des scènes dynamiques, des mouvements stylisés, ou étendre des visuels statiques en séquences animées, le cadre de Hunyuan Video offre des voies efficaces vers des résultats de haute qualité.

Comment utiliser le flux de travail Hunyuan Video - IP2V ?

Les groupes sont codés par couleur pour plus de clarté :

1. Vert - Entrées
2. Violet - Modèles
3. Rose - Échantillonneur Hunyuan
4. Rouge - VAE + Décodage
5. Gris - Sortie

Téléchargez vos entrées (image et texte) dans les nœuds verts et ajustez les paramètres de la vidéo, tels que la durée et la résolution, dans le nœud de l'échantillonneur rose.

Entrée 1 - Image

Téléchargez une image pour référence du lieu, de la personne ou de l'objet pour lesquels vous recherchez des résultats similaires.

Entrée 2 - Texte

Dans la première boîte de texte, entrez vos invites et incluez l'image en utilisant le mot-clé "<image>".

Par exemple, si votre entrée est "rue vide" et que vous souhaitez ajouter une femme, l'invite serait : "Un portrait d'une femme, l'arrière-plan est <image>."

Échantillonneur

Vous pouvez ajuster les éléments suivants :

• Résolution de l'image - Maximum est 1280px 720px, nécessitant plus de VRAM.
• Images - Cela définit le nombre d'images (24 images = 1 seconde).

Modèles

Dans ce groupe, les modèles seront téléchargés automatiquement lors de la première exécution. Veuillez attendre 3-5 minutes pour que le téléchargement se termine dans votre stockage temporaire.

Liens :

1. Diffusion: https://huggingface.co/Kijai/HunyuanVideo_comfy/blob/main/hunyuan_video_FastVideo_720_fp8_e4m3fn.safetensors

• ComfyUI > models > diffusion_models

3. Vae: https://huggingface.co/Kijai/HunyuanVideo_comfy/blob/main/hunyuan_video_vae_bf16.safetensors

• ComfyUI > models > vae

Sorties

La vidéo rendue sera enregistrée dans le dossier Outputs dans Comfyui.

Avec le flux de travail Hunyuan IP2V, vous n'êtes plus limité à la génération de vidéos basées sur du texte, vous pouvez désormais donner vie à vos images avec mouvement et style. Que ce soit pour le cinéma IA, l'art numérique ou la narration créative, ce flux de travail vous donne le pouvoir de façonner votre vision avec plus de contrôle que jamais auparavant.