Wan2.2 Fun Camera : mouvement cinématique image-vers-vidéo dans ComfyUI
Wan2.2 Fun Camera transforme une simple image fixe en une vidéo vivante avec des panoramiques, zooms et rotations fluides. Construit autour de la famille Wan 2.2 Fun, ce workflow ComfyUI se concentre sur le mouvement de caméra qui ajoute profondeur et énergie narrative sans keyframes manuels ni montage. Si vous avez besoin de clips rapides pour les réseaux sociaux, de plans héros dynamiques ou de mouvement percutant pour des visuels de produits et de personnages, Wan2.2 Fun Camera offre des résultats propres et reproductibles.
Le graphe est livré avec deux variantes pour que vous puissiez choisir le bon équilibre pour votre tâche. Le chemin natif fp8 scaled maximise la richesse du mouvement des modèles Wan2.2 Fun Camera, tandis que la variante LightX2V 4 Steps LoRA privilégie la vitesse avec un léger compromis sur la dynamique. Les deux variantes partagent les mêmes prompts, préréglages de caméra et étape d'export, rendant Wan2.2 Fun Camera facile à apprendre et rapide à itérer.
Modèles clés du workflow ComfyUI Wan2.2 Fun Camera
- Wan 2.2 Fun Camera 14B high-noise UNet fp8 scaled. Pilote les premières étapes de diffusion pour établir le mouvement et la structure dans Wan2.2 Fun Camera. Fichier Hugging Face
- Wan 2.2 Fun Camera 14B low-noise UNet fp8 scaled. Affine les détails et stabilise les frames finales dans Wan2.2 Fun Camera. Fichier Hugging Face
- Wan2.2 Image-to-Video LightX2V 4 Steps LoRA, high-noise et low-noise. Accélérateurs optionnels qui raccourcissent le sampling tout en réduisant légèrement la complexité du mouvement dans Wan2.2 Fun Camera. LoRA High-noise • LoRA Low-noise
- Wan 2.1 VAE. Encode et décode les latents en images pour le pipeline Wan2.2 Fun Camera. Fichier Hugging Face
- Encodeur de texte UMT5-XXL fp8. Interprète les prompts positifs et négatifs pour conditionner la synthèse pilotée par caméra dans Wan2.2 Fun Camera. Fichier Hugging Face
Comment utiliser le workflow ComfyUI Wan2.2 Fun Camera
Le workflow contient deux branches parallèles : « Wan2.2 Fun Camera fp8 scaled + LightX2V 4 Steps LoRA » et « Wan2.2 Fun Camera fp8 scaled ». Activez une branche et désactivez l'autre avant de générer. Les deux branches suivent les mêmes quatre étapes opérationnelles et un planning de débruitage en deux étapes qui commence avec le bruit élevé et finit avec le bruit faible pour des frames plus nettes.
Étape 1 - Charger les modèles
Ce groupe prépare les UNet high-noise et low-noise de Wan 2.2 Fun Camera, la paire optionnelle LightX2V LoRA, l'encodeur de texte UMT5-XXL et le Wan 2.1 VAE. Choisissez la branche LoRA quand vous avez besoin de délais plus courts et la branche native fp8 quand la richesse du mouvement est la priorité. Une fois chargés, les modèles restent résidents, vous pouvez donc itérer rapidement sur les mouvements de caméra et les prompts dans Wan2.2 Fun Camera.
Étape 2 - Télécharger l'image de départ
Ajoutez votre image fixe source dans le groupe « Upload start_image ». Le workflow attend une seule image et préservera le contenu principal tout en animant le point de vue. Pour de meilleurs résultats dans Wan2.2 Fun Camera, commencez avec un sujet net, un bon contraste et une composition qui laisse de la place pour le mouvement aux bords.
Étape 3 - Prompt
Entrez un prompt positif concis pour décrire l'intention du sujet et la saveur du mouvement, puis affinez avec un prompt négatif pour éviter les artefacts. Gardez les prompts courts et orientés action, par exemple « hero produit cinématique, zoom arrière doux » ou « portrait, panoramique subtil à droite ». Wan2.2 Fun Camera répond bien aux descripteurs de style et de mouvement sans surcontraindre la scène.
Étape 4 - Conditions de caméra
Choisissez un préréglage de caméra et une timeline dans le groupe WanCameraEmbedding. Cela construit un embedding de chemin de caméra plus les paramètres de durée et de résolution que le nœud principal suivra. Wan2.2 Fun Camera inclut des préréglages intuitifs comme zoom arrière, panoramique et rotation, pour que vous puissiez prévisualiser différents mouvements rapidement sans ajuster manuellement les courbes.
High noise - premières étapes
La première passe du sampler pose la structure grossière et initie la dynamique du mouvement en utilisant le UNet high-noise. C'est là que le chemin de caméra choisi commence à se manifester comme mouvement global. Dans la branche LoRA, le LightX2V 4 Steps LoRA compresse cette étape en moins de pas pour la vitesse. Dans la branche native fp8, Wan2.2 Fun Camera privilégie la fidélité du mouvement avant le raffinement.
Low noise - dernières étapes
La seconde passe du sampler se concentre sur la récupération des détails, la texture et la cohérence temporelle en utilisant le UNet low-noise. Elle respecte le chemin de caméra établi tout en nettoyant les bords et les visages. Avec le LoRA activé, cette étape est également plus rapide avec un léger coût en variation de micro-mouvement. Sans LoRA, Wan2.2 Fun Camera extrait une netteté supplémentaire des frames finales.
Décodage et export
Le VAE décode les latents en frames et le nœud Video Helper les assemble en MP4. Les paramètres par défaut ciblent un fichier H.264 largement compatible à un framerate modeste pour que les aperçus se rendent rapidement. Vous pouvez itérer sur place en ajustant les prompts ou les préréglages de caméra et en régénérant. Wan2.2 Fun Camera garde vos sorties cohérentes avec des noms de fichiers prévisibles pour les expériences par lots.
Nœuds clés du workflow ComfyUI Wan2.2 Fun Camera
WanCameraEmbedding (#87, #108)
Définit le plan de mouvement pour Wan2.2 Fun Camera. Choisissez un préréglage de caméra et définissez la résolution et la longueur du clip pour tout le plan. Si vous voyez du recadrage ou du letterboxing, ajustez largeur et hauteur ici. Les clips plus longs nécessitent plus de calcul et peuvent bénéficier du chemin LoRA pour la vitesse.
WanCameraImageToVideo (#80, #98)
Le pilote principal qui fusionne prompts, VAE, image de départ et embedding de caméra en latents conscients du mouvement. Considérez ceci comme le pont entre votre intention créative et les samplers de diffusion. Si le mouvement semble trop fort ou trop subtil, revisitez le préréglage de caméra ou les verbes du prompt plutôt que le sampler en premier.
KSamplerAdvanced (#71 et #78, #102 et #103)
Exécute un planning en deux étapes : un sampler high-noise pour établir le mouvement, puis un sampler low-noise pour affiner. Pour une structure plus forte, utilisez quelques pas supplémentaires dans la première passe, pour des détails plus nets, investissez des pas dans la seconde passe. Gardez le guidance équilibré pour que le mouvement reste naturel et ne surcolle pas au prompt.
VHS_VideoCombine (#116, #117)
Empaquette les frames décodées en un seul fichier vidéo pour une revue rapide. Ajustez le framerate pour correspondre au ressenti de votre mouvement de caméra et réglez le CRF si vous avez besoin d'exports de meilleure qualité. Utilisez un préfixe de nom de fichier propre pour garder les versions organisées tout en explorant les variations Wan2.2 Fun Camera.
LoraLoaderModelOnly (#88, #90)
Active la paire LightX2V 4 Steps LoRA. Activez-les pour des itérations plus rapides ou une pression VRAM réduite. Désactivez-les pour une richesse de mouvement maximale lors de la finalisation d'un plan Wan2.2 Fun Camera.
Extras optionnels
- Préférez les images carrées ou quasi-carrées pour les gros zooms afin que les bords ne soient pas coupés pendant le mouvement.
- Gardez les prompts positifs courts et descriptifs, puis utilisez les prompts négatifs pour filtrer les artefacts plutôt que pour diriger le mouvement.
- Si le mouvement semble statique, essayez d'abord un préréglage de caméra plus fort, puis ajoutez des verbes comme panoramique, dolly, inclinaison au prompt.
- Pour les clips plus longs, réduisez la résolution pendant l'exploration, puis upscalez plus tard dans une passe séparée.
- La branche LoRA est idéale pour les aperçus ou les délais serrés, tandis que la branche native fp8 est meilleure pour les rendus finaux Wan2.2 Fun Camera.
- Sauvegardez les seeds pour la reproductibilité lors des tests A/B de prompts et préréglages de caméra dans Wan2.2 Fun Camera.
Remerciements
Ce workflow implémente et s'appuie sur les travaux et ressources suivants. Nous remercions chaleureusement Alibaba PAI pour le modèle Wan2.2-Fun A14B Camera Control, Comfy Org pour le workflow et la documentation ComfyUI Wan2.2 Fun Camera Control, et aigc-apps pour le framework VideoX-Fun pour leurs contributions et leur maintenance. Pour les détails officiels, veuillez consulter la documentation et les dépôts originaux liés ci-dessous.
Ressources
- Comfy Org/Wan2.2 Fun Camera Documentation
- GitHub : aigc-apps/VideoX-Fun
- Hugging Face : alibaba-pai/Wan2.2-Fun-A14B-Control-Camera
- arXiv : Wan: Open and Advanced Large-Scale Video Generative Models
- Docs / Release Notes : Wan2.2 Fun Camera Documentation
Note : L'utilisation des modèles, datasets et code référencés est soumise aux licences et conditions respectives fournies par leurs auteurs et mainteneurs.