L'enveloppe ComfyUI FramePack intègre la technologie avancée FramePack de l'Université Stanford dans l'environnement ComfyUI. FramePack est basé sur des techniques innovantes d'emballage de contexte de cadre qui permettent une génération de vidéos longues efficace et de haute qualité avec des ressources informatiques minimales. La technologie FramePack vous permet de générer des milliers de cadres à plein 30fps même avec des configurations GPU modestes comme les GPU de 6 Go d'ordinateurs portables, rendant la création de vidéos professionnelles accessible à tous. L'approche unique de FramePack en matière de génération de vidéos ressemble à la diffusion d'images mais offre des résultats vidéo exceptionnels.
Exemple de configuration pour FramePack :
Load Image
: Téléchargez une image de référence qui sera animée en vidéo avec FramePackFramePackSampler
: Définir la longueur de la vidéo (par exemple, 5,0 secondes)Video Combine
: Définir le taux de trame (par exemple, 30) et le format de sortie (par exemple, video/h264-mp4)run
pour exécuter le workflow FramePackVideo Combine
Nœud FramePackSampler :
steps
: Nombre d'étapes de diffusion (par exemple, 30) - des valeurs plus élevées produisent une meilleure qualité mais prennent plus de temps dans FramePackguidance_scale
: Force de guidage supplémentaire dans FramePack (par exemple, 10,00) - des valeurs plus élevées adhèrent plus strictement aux invitesseed
: Graine aléatoire pour des résultats reproductibles dans FramePack (par exemple, 47)total_second_length
: Durée de la vidéo générée en secondes (par exemple, 5,0) dans FramePackcontrol_after_generate
: Contrôle la méthode d'échantillonnage anti-dérive dans FramePack (garder comme "fixed" pour de meilleurs résultats)Nœud Video Combine :
frame_rate
: Images par seconde dans la vidéo FramePack de sortie (par exemple, 30)crf
: Facteur de qualité de compression (par exemple, 19) - des valeurs plus basses = vidéos FramePack de meilleure qualitéGénérer des vidéos plus longues avec FramePack : L'un des principaux atouts de FramePack est la capacité à générer des vidéos prolongées de manière efficace. Pour créer des vidéos plus longues :
total_second_length
dans le nœud FramePackSampler (par exemple, de 5,0 à 10,0, 30,0, voire 60,0+)control_after_generate
réglé sur "fixed" pour utiliser la technologie avancée d'échantillonnage anti-dérive de FramePackgpu_memory_preservation
pour gérer l'utilisation de la mémoirelatent_window_size
Ajuster la résolution vidéo : Pour changer la résolution de sortie de la vidéo FramePack, ajustez le nœud "Resize Image" dans le workflow :
width
et height
pour définir les dimensions souhaitées de la vidéo FramePackgpu_memory_preservation
pour équilibrer l'utilisation de la mémoire dans FramePackConseils d'invite FramePack :
La technologie FramePack utilise des méthodes d'échantillonnage bidirectionnelles innovantes qui brisent les contraintes de causalité traditionnelles pour éviter la dégradation de la qualité dans les vidéos plus longues. En particulier pour la génération d'image à vidéo, FramePack utilise l'"échantillonnage anti-dérive inversé" qui traite le premier cadre comme une cible d'approximation tout au long du processus de génération, assurant des résultats de haute qualité même dans les vidéos allant jusqu'à 60 secondes ou plus (1800+ cadres).
Pour des détails supplémentaires et des téléchargements de modèles FramePack :
Ce workflow est alimenté par FramePack, développé par Lvmin Zhang et Maneesh Agrawala à l'Université Stanford. L'enveloppe ComfyUI FramePack est fournie par kijai, incluant des workflows et intégrations sur mesure qui permettent une génération efficace de vidéos longues avec la technologie FramePack. Tout le crédit revient aux auteurs originaux pour leur travail révolutionnaire sur FramePack.
RunComfy est la première ComfyUI plateforme, offrant des ComfyUI en ligne environnement et services, ainsi que des workflows ComfyUI proposant des visuels époustouflants. RunComfy propose également AI Playground, permettant aux artistes d'utiliser les derniers outils d'IA pour créer des œuvres d'art incroyables.