ComfyUI Nvidia Cosmos Text & Image to Video Workflow

¿Qué es el Flujo de Trabajo de Nvidia Cosmos?

Convierte tu imaginación en videos fluidos utilizando los modelos Cosmos de Nvidia recientemente lanzados en ComfyUI. Este flujo de trabajo demuestra las fuertes capacidades de IA de Nvidia Cosmos con sus características de generación de texto a video e imagen a video. Impulsado por los modelos de última generación 7B y 14B de Nvidia Cosmos, puedes crear videos de alta calidad a partir de descripciones textuales o imágenes fijas. El motor de Nvidia Cosmos ofrece resultados estelares gracias a sus capacidades de procesamiento de video ultra eficientes.

Características Clave de Nvidia Cosmos

• Modos de Generación Dual: Nvidia Cosmos ofrece tanto generación de texto a video como de imagen a video
• Movimiento Garantizado: Siempre genera videos con movimiento al usar 121 fotogramas
• Indicaciones Negativas Efectivas: El modelo no destilado asegura un mejor control a través de indicaciones negativas
• Control de Imagen Flexible: Genera desde el último fotograma o crea transiciones entre imágenes
• VAE Ultra Eficiente: Nvidia Cosmos emplea un sistema VAE refinado para la generación de videos suaves y de alta calidad
• Soporte de Alta Resolución: Crea videos en resoluciones de 704x704 y superiores
• Control Preciso de Fotogramas: Optimizado para secuencias de 121 fotogramas
• Interpolación de Imágenes Inteligente: Genera transiciones suaves entre imágenes de referencia

Cómo Usar el Flujo de Trabajo de Nvidia Cosmos

El flujo de trabajo de Nvidia Cosmos contiene dos partes principales: _texto a video_ y _imagen a video_. Por defecto, el grupo _imagen a video_ está omitido. Para cambiar entre los dos modos:

• Para _texto a video_: Mantén el grupo _imagen a video_ omitido (configuración predeterminada)
• Para _imagen a video_: Haz clic derecho en el grupo _imagen a video_ y selecciona Set Group Nodes to Always

1. Generación de Texto a Video con Nvidia Cosmos

Configuración y Requisitos

• Elige el tamaño de modelo de Nvidia Cosmos que prefieras (se recomienda 7B para empezar)
  
• Establece la resolución (Por defecto 1280x704; mínimo 704x704)
• Configuraciones de fotogramas:
  • Longitud: 121 fotogramas (El modelo funciona de manera óptima con una longitud de 121; desviarse demasiado de esto puede resultar en una calidad de video inferior.)
  • Tasa de fotogramas: 24.00 (tasa predeterminada para calidad óptima) <img src="https://cdn.runcomfy.net/workflow_assets/1184/readme02.webp" alt="Nvidia Cosmos" width="350"/> <img src="https://cdn.runcomfy.net/workflow_assets/1184/readme03.webp" alt="Nvidia Cosmos" width="350"/>

Parámetros de Muestreo para Nvidia Cosmos

• Muestreador: res_multistep (Muestreador recomendado por Nvidia para Cosmos)
• Planificador: karras (predeterminado para estabilidad)
• Pasos: 20 (mayor = mejor calidad pero más lento; menor = más rápido pero menos detallado)
• CFG: 6.5 (fuerza de guía de la indicación)
• Desruido: 1.00 (1.00 = transformación completa; valores más bajos mantienen más contenido original)
  

Consejos de Indicación para Nvidia Cosmos

• Utiliza indicaciones detalladas y de varias oraciones para obtener mejores resultados
• Incluye indicaciones negativas comprensivas
• Las indicaciones cortas pueden generar videos coherentes pero podrían no seguir estrictamente las instrucciones

2. Generación de Imagen a Video con Nvidia Cosmos

Configuración y Requisitos

• Mismos requisitos básicos que Nvidia Cosmos texto a video
• Soporta entradas start_image y end_image

Opciones de Imagen de Referencia

• Establece una start_image o end_image, o ambas al mismo tiempo
• Las imágenes funcionan mejor cuando son similares en estilo y contenido (para transiciones suaves)
  

Parámetros Clave

• Configuraciones de muestreo idénticas al modo de texto a video
• Mantiene los mismos estándares de calidad de video

Consejos Avanzados para Nvidia Cosmos

• Para resultados de mayor calidad con más VRAM, prueba el modelo Nvidia Cosmos 14B
• Asegúrate de que las indicaciones sean descriptivas y detalladas para obtener los mejores resultados
• Experimenta con diferentes pares de imágenes para transiciones únicas

Más Información sobre Nvidia Cosmos

Para más detalles y actualizaciones sobre Nvidia Cosmos, visita Nvidia Cosmos Official Page.