kling-video-o1/video-to-video/reference
Crea una nuova ripresa da un video di riferimento e guidala con prompt, elementi, immagini, proporzioni, durata e audio originale.
| Parametro | Tipo | Predefinito/Intervallo | Descrizione |
|---|---|---|---|
| image | string (image_uri) | Input obbligatorio | URL dell'immagine del personaggio di riferimento. |
| video | string (video_uri) | Input obbligatorio | URL del video di guida che fornisce il movimento. |
| prompt | string | Facoltativo | Guida testuale per stile, aspetto o dettagli minori della scena. |
| resolution | string | 480p / 720p | Risoluzione dell'uscita; 480p è l'impostazione predefinita. |
| seed | integer | Non specificato | Seme utilizzato per variare o riprodurre una generazione. |
La pagina corrente non espone le impostazioni num_inference_steps, ControlNet o IP-Adapter.
SCAIL può essere chiamato tramite l'API RunComfy con gli stessi controlli esposti nell'interfaccia del modello: image, video, prompt, resolution e seed.
Nota: endpoint API per SCAIL
Crea una nuova ripresa da un video di riferimento e guidala con prompt, elementi, immagini, proporzioni, durata e audio originale.
Crea un video di transizione tra un’immagine iniziale e una finale obbligatorie, con controlli per prompt, proporzioni, risoluzione, durata, stile, audio e ottimizzazione.
Unisci le immagini fisse iniziali e finali in video cinematografici fluidi
FLUX 3 Draft Keyframe: anteprime video veloci con più fotogrammi chiave a 720p
Modello video AI: oltre 400 movimenti, resa cinematografica realistica
Segmenta l’elemento descritto lungo i fotogrammi di un video.
SCAIL è un modello di animazione dei personaggi associato a Tsinghua University e Z.ai. Utilizza l'immagine di un personaggio di riferimento più un video di guida, quindi il personaggio proviene dall'immagine e il movimento proviene dal video. Un tipico flusso di lavoro da testo a video crea invece una nuova scena principalmente da un suggerimento scritto.
SCAIL può essere utilizzato con riferimenti illustrati, cartoni animati e in stile anime, nonché con fotografie. Una silhouette chiara e caratteristiche visibili del viso e del corpo aiutano il modello a seguire il movimento di guida mantenendo riconoscibile il personaggio originale.
L'attuale interfaccia RunComfy offre 480p e 720p, con 480p come impostazione predefinita. Lo schema della pagina non espone un controllo della durata né pubblica una lunghezza massima della clip, quindi controlla i requisiti di caricamento e API correnti per il video che prevedi di utilizzare.
Il flusso di lavoro esposto utilizza un'immagine di riferimento, un video di guida e un messaggio di testo facoltativo, oltre a resolution e seed. Questa pagina non espone input ControlNet o IP-Adapter e il relativo schema non indica un limite di token prompt.
Convalida l'immagine di riferimento e il video di guida nell'interfaccia del modello RunComfy, quindi chiama l'endpoint SCAIL con i campi image, video, prompt, resolution e seed corrispondenti. Aggiungi autenticazione, polling, nuovi tentativi e convalida dell'output per il tuo flusso di lavoro di produzione.
Il flusso di lavoro esposto non richiede agli utenti di caricare uno scheletro di posa per ogni fotogramma. Invece, l'immagine di riferimento definisce il personaggio e il video di guida fornisce il movimento, riducendo la quantità di configurazione manuale necessaria per un passaggio di animazione iniziale.
SCAIL è specializzato nel trasferire il movimento all'immagine di un personaggio esistente. I modelli generali da testo a video o da immagine a video possono essere migliori quando l'obiettivo è inventare una nuova scena; SCAIL è la soluzione più diretta quando è necessario combinare un carattere specifico e un movimento di guida specifico.
La pagina di origine non specifica una licenza, quindi non si deve presumere un'autorizzazione commerciale. Esamina l'attuale repository ufficiale e la licenza del modello, nonché i termini RunComfy applicabili, prima di utilizzare gli output in un progetto commerciale.
Nessun file di posa per fotogramma viene esposto come input. Puoi generare un risultato iniziale dall'immagine e dal video di guida, ma il lavoro di produzione potrebbe comunque richiedere una revisione o una post-produzione quando le mani, le occlusioni, i movimenti rapidi o i dettagli dell'identità sono importanti.
Inizia con un'immagine di riferimento nitida che mostri chiaramente il personaggio e un video di guida con movimenti leggibili. Inquadrature e proporzioni del corpo simili possono facilitare il trasferimento, mentre occlusioni pesanti, scene affollate o movimenti bruschi della telecamera meritano test aggiuntivi.
RunComfy è la piattaforma principale ComfyUI che offre ComfyUI online ambiente e servizi, insieme a workflow di ComfyUI con visuali mozzafiato. RunComfy offre anche AI Models, consentire agli artisti di sfruttare gli ultimi strumenti di AI per creare arte incredibile.
