Style Argile avec Unsampling

Ce workflow, créé par Inner-Reflections, explore l'Unsampling comme méthode pour un transfert de style cohérent dans ComfyUI. Pour un guide détaillé sur l'utilisation de l'Unsampling, consultez : Consistent Style Transfer with Unsampling.

En utilisant ce workflow, vous pouvez transformer votre vidéo en une animation de style argile. Le processus est simple, nécessitant un effort minimal pour obtenir un look claymation fluide et saisissant, rappelant les animations traditionnelles en stop-motion.

Le processus d'Unsampling dans ComfyUI convertit la vidéo d'entrée en bruit latent qui préserve le mouvement et la structure originaux. Contrairement au bruit aléatoire, ce bruit représentatif sert de base au processus de diffusion, permettant à l'IA d'appliquer le style argile tout en maintenant la cohérence temporelle entre les images vidéo.

Composants clés du Workflow Unsampling Style Argile :

Inputs : C'est ici que vous téléchargez votre vidéo d'entrée. Le paramètre frame_load_cap limite le nombre d'images chargées à partir de l'entrée. Le paramètre select_every_nth saute des images pour réduire la charge de travail globale. L'augmentation de la valeur select_every_nth accélère le processus mais peut affecter la fluidité de l'animation finale de style argile.

Unsample : Le composant Unsample utilise l'échantillonnage euler pour trouver le bruit qui représente avec précision la vidéo d'entrée. En ajustant les échelles cfg, vous pouvez affiner le processus d'Unsampling pour mieux correspondre à l'entrée. Le nœud Flip Sigma inverse le processus de diffusion, convertissant les images d'entrée en bruit latent.

Prompt : Un prompt bien construit peut améliorer significativement le résultat final, surtout lorsqu'on vise un style argile distinctif. Pour ce style, un bon prompt positif pourrait être "(claymation:1.15), stop motion, (tout fait d'argile:1.1), belle femme dansant." Ce prompt guide le modèle pour recréer l'animation de manière à imiter les mouvements et textures réels de l'argile.

ControlNet : Le composant ControlNet utilise Depth ControlNet, prétraité par DepthAnythingV2, pour maintenir la profondeur et la géométrie de la vidéo originale. Cela garantit que le processus de resampling adhère à la structure de la vidéo d'entrée. Le paramètre strength contrôle l'influence de ControlNet sur la sortie, des valeurs plus élevées conduisant à une rétention de structure plus précise.

Resample : Le composant Resample prend le bruit latent non-échantillonné et exécute à nouveau le processus de diffusion, appliquant le style argile pour générer un effet claymation fluide et cohérent.

Outputs : Les images de sortie finales sont décodées, enregistrées sous forme d'images individuelles, puis combinées en une vidéo MP4 agrandie, préservant le taux de trame original tout en mettant en valeur le nouvel effet de style argile.

Le style argile n'est qu'une des nombreuses possibilités passionnantes que vous pouvez réaliser avec ce workflow Unsampling dans ComfyUI. Expérimentez avec différents prompts et paramètres pour créer votre style unique, et profitez du processus de transformation de vos vidéos en animations dynamiques et visuellement époustouflantes !