VACE 14B : Création et Édition Vidéo Tout-en-Un

Qu'est-ce que le Flux de Travail ComfyUI VACE 14B ?

ComfyUI VACE 14B est un cadre unifié puissant qui intègre diverses capacités de génération et d'édition vidéo dans un seul modèle. Construit sur la base avancée Wan2.1 et développé par Tongyi Lab au sein du Groupe Alibaba, le ComfyUI VACE permet aux créateurs d'effectuer 5 tâches essentielles de manipulation vidéo sans passer d'un outil spécialisé à un autre. Ce flux de travail ComfyUI VACE 14B exploite la puissance du modèle à 14B paramètres pour fournir des capacités de création et d'édition vidéo de haute qualité à travers une interface intuitive.

1. Avantages de ComfyUI VACE 14B

• Solution Tout-en-Un : Le ComfyUI VACE offre un cadre unifié pour la création et l'édition vidéo sans changer d'outils
• Sortie de Haute Qualité : Générez des vidéos jusqu'à une résolution de 720p avec le puissant modèle VACE 14B
• Contrôles Flexibles : Le flux de travail ComfyUI VACE fournit de multiples modalités d'entrée, y compris des images de référence, des masques, des cartes de profondeur et des invites textuelles
• Préservation de l'Identité : ComfyUI VACE maintient l'identité du sujet pendant les transformations et la génération lors de l'utilisation de VACE 14B
• Composition des Tâches : ComfyUI VACE vous permet de combiner différentes capacités pour des transformations complexes grâce à VACE 14B

2. Cinq Capacités Clés dans le Flux de Travail ComfyUI VACE 14B

Le flux de travail ComfyUI VACE comprend 5 composants distincts, chacun spécialisé pour différentes tâches de création et d'édition vidéo propulsées par VACE 14B :

1. Image de Référence+ControlNet : ComfyUI VACE vous permet de remplacer le personnage principal de votre vidéo par celui d'une image de référence, tout en conservant le mouvement et la structure grâce à VACE 14B
2. Deux Images en Vidéo : Avec ComfyUI VACE, créez une vidéo combinant deux personnages ou objets, chacun pris d'une image de référence distincte via VACE 14B
3. Premières et Dernières Images : ComfyUI VACE guide précisément la génération vidéo en définissant à la fois les premières et dernières images, assurant un mouvement fluide à travers les images via VACE 14B
4. Édition d'Objets Vidéo : ComfyUI VACE vous permet de modifier sélectivement des objets spécifiques dans les vidéos tout en en préservant d'autres en utilisant VACE 14B
5. Expansion Vidéo : En utilisant ComfyUI VACE, effectuez un outpainting spatial pour agrandir le cadre vidéo tout en préservant la cohérence visuelle avec la technologie VACE 14B

3. Guide de Démarrage Rapide pour ComfyUI VACE 14B

3.1 Démarrage Rapide de ComfyUI VACE Image de Référence+ControlNet

1. Sélectionnez le groupe de flux de travail "Image de Référence+ControlNet" dans ComfyUI VACE
2. Chargez votre vidéo source dans le nœud Load Video (Upload)
3. Téléchargez une image de référence du nouveau sujet dans le nœud Load Image
   • Conseil : L'utilisation d'images de référence avec fond blanc donne souvent de meilleurs résultats d'intégration de sujet lors de l'utilisation de VACE 14B
4. Entrez des invites descriptives sur la scène et le style souhaités
5. Utilisez des invites négatives pour éviter les éléments indésirables dans votre sortie ComfyUI VACE générée par VACE 14B
6. Résolution recommandée : 512x672 recommandée pour l'efficacité mémoire avec ComfyUI VACE 14B
7. Ajustez les paramètres d'échantillonnage
8. Cliquez sur "Run" pour générer la vidéo avec le style/sujet de l'image de référence en utilisant ComfyUI VACE 14B

3.2 Démarrage Rapide de ComfyUI VACE Deux Images en Vidéo

1. Sélectionnez le groupe de flux de travail "Deux Images en Vidéo" dans ComfyUI VACE
2. Téléchargez votre première image de référence dans le premier nœud Load Image
3. Téléchargez votre deuxième image de référence dans le second nœud Load Image
4. Cette méthode ComfyUI VACE propulsée par VACE 14B est particulièrement bien adaptée aux applications de commerce électronique et est reconnue pour sa capacité à restituer efficacement les détails fins, y compris les mains
5. Entrez des invites détaillées décrivant la scène souhaitée, le style et les caractéristiques de mouvement ou de transition entre les images
6. Ajustez frame_rate dans le nœud Video Combine pour définir la fluidité de la vidéo dans votre sortie ComfyUI VACE créée par VACE 14B
7. Configurez les paramètres d'échantillonnage dans le nœud WanVideo Sampler
8. Cliquez sur "Run" pour générer la transition vidéo avec ComfyUI VACE 14B

3.3 Démarrage Rapide de ComfyUI VACE Premières et Dernières Images

1. Sélectionnez le groupe de flux de travail "Premières et Dernières Images" dans l'interface ComfyUI VACE
2. Téléchargez votre image de départ dans le premier nœud Load Image
3. Téléchargez votre image de fin dans le second nœud Load Image
4. Configurez les paramètres du nœud WanVideo VACE Start To End Frame pour des résultats optimaux avec VACE 14B
5. Entrez des invites décrivant le mouvement et le style de transition souhaités pour le traitement ComfyUI VACE
6. Ajustez les paramètres d'échantillonnage pour affiner la génération VACE 14B
7. Cliquez sur "Run" pour créer une vidéo de transition fluide avec ComfyUI VACE 14B

3.4 Démarrage Rapide de ComfyUI VACE Édition d'Objets Vidéo

1. Sélectionnez le groupe de flux de travail "Édition d'Objets Vidéo" dans ComfyUI VACE
2. Chargez votre vidéo source en utilisant le nœud Load Video (Upload)
3. Prenez manuellement une capture d'écran d'une image de votre vidéo à l'aide de n'importe quel lecteur vidéo
4. Téléchargez cette image dans le nœud Points Editor via l'entrée bg_image — cette image sera utilisée pour l'annotation manuelle des points dans ComfyUI VACE pour le traitement VACE 14B
5. Téléchargez l'image de référence de l'objet que vous souhaitez insérer ou utiliser pour le remplacement en utilisant le nœud Load Image
6. Dans le Points Editor de ComfyUI VACE, marquez les zones comme suit :
   • Points verts (Shift + Clic Gauche) : marquez les zones à modifier (par exemple l'objet à remplacer)
   • Points rouges (Shift + Clic Droit) : marquez les zones à préserver (par exemple l'arrière-plan ou le sujet)
   • Clic Droit sur un point existant pour le supprimer
7. Le module S2/SAM2 Segmentation générera un masque basé sur vos annotations
8. (Optionnel) Affinez le masque en utilisant le nœud Grow Mask With Blur dans ComfyUI VACE
9. Entrez des invites positives pour décrire le nouvel objet ou la modification (par exemple "un parapluie rouge traditionnel")
10. Entrez des invites négatives pour exclure les éléments indésirables de votre sortie ComfyUI VACE générée par VACE 14B
11. Cliquez sur "Run" pour générer la vidéo éditée avec l'objet remplacé selon vos entrées en utilisant ComfyUI VACE 14B

3.5 Démarrage Rapide de ComfyUI VACE Expansion Vidéo

1. Sélectionnez le groupe de flux de travail "Expansion Vidéo" dans ComfyUI VACE
2. Chargez votre vidéo source dans le nœud Load Video (Upload)
3. Configurez le nœud ImagePad KJ avec vos paramètres d'expansion souhaités
4. Entrez des invites décrivant le contenu qui devrait apparaître dans les zones étendues pour le traitement ComfyUI VACE à travers VACE 14B
5. Le ComfyUI VACE amélioré par VACE 14B offre une meilleure gestion des bords pour une expansion plus homogène
6. Ajustez les paramètres d'échantillonnage pour la cohérence avec la vidéo originale
7. Cliquez sur "Run" pour créer la vidéo étendue avec ComfyUI VACE 14B

4. Paramètres Clés pour ComfyUI VACE 14B

Paramètres d'Échantillonnage Communs pour ComfyUI VACE :

• strength: 1.0 (par défaut pour un effet maximum dans ComfyUI VACE 14B)
  • Plus élevé = effet plus fort de l'algorithme VACE 14B dans ComfyUI VACE
  • Plus bas = plus de préservation du contenu original
• guidance: 7-9 (recommandé pour des résultats optimaux ComfyUI VACE lors de l'utilisation de VACE 14B)
  • Plus élevé = plus fidèle aux références/conditions mais moins de créativité
  • Plus bas = plus créatif mais peut s'éloigner des références
• steps: 20-25 (recommandé pour ComfyUI VACE 14B)
  • Plus élevé = meilleure qualité mais génération plus lente
  • Plus bas = génération plus rapide mais potentiellement de moindre qualité
• cfg: 4.0 (recommandé pour ComfyUI VACE intégré avec VACE 14B)
  • Plus élevé = influence plus forte de l'invite mais résultats potentiellement moins naturels
  • Plus bas = plus naturel mais peut ignorer les détails de l'invite
• seed: 18 (exemple pour ComfyUI VACE 14B)
  • Même seed + mêmes réglages = mêmes résultats
  • Changer pour différentes variations dans vos sorties ComfyUI VACE générées via VACE 14B
• shift: 5.0 (par défaut dans ComfyUI VACE 14B)
  • Plus élevé = plus de variation de mouvement
  • Plus bas = mouvement plus conservateur

5. Paramètres Avancés pour ComfyUI VACE 14B

WanVideo VACE :

• num_frames: 29 (par défaut pour les flux de travail de référence dans ComfyUI VACE 14B)
  • Plus élevé = vidéo plus longue mais plus de temps de traitement
  • Plus bas = vidéo plus courte mais génération plus rapide avec ComfyUI VACE utilisant VACE 14B
• vace_start_percent: 0.00 (par défaut dans ComfyUI VACE lors de l'utilisation de VACE 14B)
  • Contrôle où commence l'effet VACE dans le processus de génération
• vace_end_percent: 1.00 (par défaut dans ComfyUI VACE 14B)
  • Contrôle où se termine l'effet VACE dans le processus de génération

WanVideo VACE Start To End Frame :

• num_frames: 40 (par défaut dans ComfyUI VACE 14B)
  • Plus élevé = transitions plus longues et plus fluides mais plus de temps de traitement
  • Plus bas = vidéo plus courte mais génération plus rapide avec ComfyUI VACE propulsé par VACE 14B
• empty_frame_level: 0.50 (par défaut pour ComfyUI VACE 14B)
  • Plus élevé = cadres intermédiaires plus créatifs
  • Plus bas = interpolation plus directe

Video Combine dans ComfyUI VACE :

• frame_rate: 16 (par défaut pour ComfyUI VACE avec support VACE 14B)
  • Plus élevé = mouvement plus fluide mais taille de fichier plus grande
  • Plus bas = mouvement plus saccadé mais taille de fichier plus petite
• format: video/h264-mp4 (par défaut dans ComfyUI VACE 14B)
• pix_fmt: yuv420p (par défaut dans ComfyUI VACE avec VACE 14B)

Paramètres Expérimentaux pour ComfyUI VACE 14B :

• cfg_zero_star: true (par défaut dans ComfyUI VACE fonctionnant avec VACE 14B)
  • Paramètre expérimental pouvant affecter la qualité de génération
• fresca_scale_high: 1.25 (par défaut pour ComfyUI VACE 14B)
  • Contrôle la préservation des détails haute fréquence
• fresca_freq_cutoff: 20 (par défaut dans ComfyUI VACE amélioré par VACE 14B)
  • Seuil de fréquence pour la préservation des détails

Remerciements

Ce flux de travail ComfyUI VACE 14B est propulsé par VACE (Video All-in-one Creation and Editing), développé par Zeyinzi Jiang, Zhen Han, Chaojie Mao, Jingfeng Zhang, Yulin Pan, et Yu Liu au Tongyi Lab, Alibaba Group. L'intégration ComfyUI VACE utilise des nœuds et des adaptations par Kijai () pour implémenter VACE 14B. Le document de recherche original pour VACE 14B est disponible à . Ces flux de travail ComfyUI VACE avec VACE 14B peuvent également être exécutés sur Ringhub pour ceux qui n'ont pas de matériel local adéquat.