fantasy-portrait/image-to-video

Introduction de Fantasy Portrait

Cette version vous permet de transformer une image fixe en une animation cinématique Fantasy Portrait en utilisant le modèle FantasyPortrait de Fantasy-AMAP, combiné à Wan 2.1 et à une option LoRA légère. Le système préserve l’identité tout en rendant les détails du visage expressifs, produisant des clips vidéo riches en émotions, conçus pour les créateurs souhaitant générer des mouvements cinématiques à partir d’un seul portrait.

Fantasy Portrait vous aide à transformer des images fixes en animations dynamiques préservant l’identité. Idéal pour les créateurs, artistes et conteurs, il génère des clips vidéo expressifs aux mouvements naturels à partir d’une photo de portrait et d’une vidéo. Le résultat est une vidéo MP4 haute fidélité, à cadrage constant et à la qualité cinématique soignée.

Modèles Clés pour Fantasy Portrait

FantasyPortrait (Fantasy-AMAP)

Le modèle FantasyPortrait fournit les embeddings principaux sensibles à l’identité et à l’expression, garantissant la préservation des traits du sujet tout en permettant des mouvements faciaux subtils. Il constitue le cœur du flux de travail Fantasy Portrait. Vous pouvez en savoir plus sur le projet GitHub et l’article arXiv correspondant.

WanVideo 2.1 I2V (14B, 720p)

WanVideo 2.1 agit comme l’ossature de diffusion vidéo, permettant la génération d’animations haute résolution à partir d’un portrait et d’instructions textuelles. Il échantillonne le contenu vidéo selon des conditions d’image et de texte, produisant des résultats cohérents et expressifs. Des poids quantifiés et compatibles avec Comfy sont disponibles via le pack de modèles Hugging Face de Kijai.

Comment Utiliser Fantasy Portrait

Entrées Requises

Vous devez commencer par fournir une image et une vidéo via les entrées Image et Vidéo, qui constituent la base de la génération Fantasy Portrait. Définissez les valeurs de largeur (Width) et de hauteur (Height) pour fixer les dimensions de sortie, et utilisez Number of Frames pour contrôler la durée de votre portrait animé. Ces entrées sont essentielles pour assurer la cohérence du cadrage et la bonne durée de l’animation.

Entrées et Contrôles Optionnels

Vous pouvez orienter la qualité artistique ou émotionnelle du rendu en ajoutant un Prompt avec de courtes phrases descriptives. Si nécessaire, ajustez Seed pour faire varier l’aléatoire entre les générations, Shift pour influencer le rythme du mouvement, et Steps pour affiner la précision de l’échantillonnage. Ces contrôles optionnels permettent d’expérimenter des variations stylistiques tout en préservant l’identité du sujet.

Sorties

Le flux de travail produit une vidéo MP4 de haute qualité, par défaut à 16 fps et au format yuv420p, conformément à la description du Readme. Cette sortie est générée à partir de votre portrait initial, combiné avec les embeddings et les prompts, pour créer un mouvement cinématographique riche en expression. Le résultat final est un clip d’animation Fantasy Portrait soigné et expressif.

Bonnes Pratiques

Pour des résultats optimaux, utilisez une image de portrait nette et bien éclairée comme point de départ. Choisissez soigneusement la vidéo d’animation de référence. Gardez votre Prompt concis et axé sur l’ambiance ou la lumière plutôt que sur les détails d’identité. Des ajustements modérés de Steps peuvent affiner le rendu visuel, tandis qu’un prompt concis assure des expressions naturelles. Vérifiez toujours que Width, Height et Number of Frames correspondent au cadrage et à la durée que vous souhaitez obtenir.