dreamina-3-0/text-to-video
Erstelle in Sekunden realistische Bewegtbilder mit Dreamina 3.0.
– Dieser Workflow zielt darauf ab, einen vorhandenen Charakter zu animieren, anstatt aus Text eine völlig unabhängige Szene zu generieren.
| Parameter | Typ | Standard/Bereich | Beschreibung |
|---|---|---|---|
| image | string (image_uri) | Erforderliche Eingabe | URL des Referenzzeichenbildes. |
| video | string (video_uri) | Erforderliche Eingabe | URL des Fahrvideos, das die Bewegung liefert. |
| prompt | string | Optional | Textanweisungen für Stil, Aussehen oder kleinere Szenendetails. |
| resolution | string | 480p / 720p | Ausgabeauflösung; 480p ist die Standardeinstellung. |
| seed | integer | Nicht angegeben | Seed zum Variieren oder Reproduzieren eines Ergebnisses. |
Die aktuelle Seite stellt die Einstellungen „num_inference_steps“, ControlNet oder IP-Adapter nicht zur Verfügung.
SCAIL kann über die RunComfy-API mit denselben Steuerelementen aufgerufen werden, die in der Modellschnittstelle verfügbar sind: „image“, „video“, „prompt“, „resolution“ und „seed“.
Hinweis: API-Endpunkt für SCAIL
Erstelle in Sekunden realistische Bewegtbilder mit Dreamina 3.0.
Erstklassige filmische Text-zu-Video-Umwandlung mit der höchsten visuellen Wiedergabetreue in der Kling V3.0-Familie.
Erstellen Sie 1080p-Clips mit mehreren Referenzen und präziser Bildsteuerung.
Verwandeln Sie statische Motive in flüssige Videoclips mit kontrollierbarer Audiogenerierung.
FLUX 3 Draft FLF: Schnelle Start-End-Frame-Videovorschau mit 720p
Stellen Sie Menschen oder Objekte in Videos frei und konfigurieren Sie Codec, Kantenverfeinerung und Motivtyp.
SCAIL ist ein Charakteranimationsmodell, das mit Tsinghua University und Z.ai verknüpft ist. Es verwendet ein Referenzbild eines Charakters und ein Fahrvideo, sodass der Charakter aus dem Bild und die Bewegung aus dem Video stammt. Ein typischer Text-zu-Video-Workflow erstellt stattdessen eine neue Szene hauptsächlich aus einer schriftlichen Eingabeaufforderung.
SCAIL kann mit illustrierten, Cartoon- und Anime-Referenzen sowie Fotos verwendet werden. Eine klare Silhouette und sichtbare Gesichts- und Körpermerkmale helfen dem Modell, der Fahrbewegung zu folgen und gleichzeitig den ursprünglichen Charakter erkennbar zu halten.
Die aktuelle RunComfy-Schnittstelle bietet 480p und 720p, wobei 480p die Standardeinstellung ist. Das Seitenschema stellt keine Dauersteuerung bereit und veröffentlicht keine maximale Cliplänge. Überprüfen Sie daher die aktuellen Upload- und API-Anforderungen für das Video, das Sie verwenden möchten.
Der bereitgestellte Workflow verwendet ein Referenzbild, ein Fahrvideo und eine optionale Textaufforderung sowie resolution und seed. Diese Seite stellt keine ControlNet- oder IP-Adapter-Eingaben zur Verfügung und ihr Schema gibt kein Prompt-Token-Limit an.
Validieren Sie das Referenzbild und das Fahrvideo in der Modellschnittstelle RunComfy und rufen Sie dann den Endpunkt SCAIL mit den entsprechenden Feldern image, video, prompt, resolution und seed auf. Fügen Sie Authentifizierung, Abfrage, Wiederholungsversuche und Ausgabevalidierung für Ihren Produktionsworkflow hinzu.
Der exponierte Workflow erfordert nicht, dass Benutzer für jedes Bild ein Posenskelett hochladen. Stattdessen definiert das Referenzbild den Charakter und das Fahrvideo liefert die Bewegung, wodurch der manuelle Einrichtungsaufwand für einen ersten Animationsdurchlauf reduziert wird.
SCAIL ist auf die Übertragung von Bewegungen auf ein vorhandenes Charakterbild spezialisiert. Allgemeine Text-zu-Video- oder Bild-zu-Video-Modelle sind möglicherweise besser, wenn das Ziel darin besteht, eine neue Szene zu erfinden. SCAIL ist die direktere Anpassung, wenn ein bestimmter Charakter und eine bestimmte Fahrbewegung kombiniert werden müssen.
Auf der Quellseite ist keine Lizenz angegeben, daher sollte nicht von einer kommerziellen Erlaubnis ausgegangen werden. Lesen Sie die aktuelle offizielle Repository- und Modelllizenz sowie die geltenden RunComfy-Bedingungen, bevor Sie Ergebnisse in einem kommerziellen Projekt verwenden.
Es wird keine Posendatei pro Frame als Eingabe angezeigt. Sie können aus dem Bild und dem Fahrvideo ein erstes Ergebnis generieren, aber die Produktionsarbeit muss möglicherweise noch überprüft oder nachbearbeitet werden, wenn Hände, Verdeckungen, schnelle Bewegungen oder Identitätsdetails wichtig sind.
Beginnen Sie mit einem scharfen Referenzbild, das den Charakter deutlich zeigt, und einem Fahrvideo mit lesbaren Bewegungen. Ähnliche Bildausschnitte und Körperproportionen können die Übertragung erleichtern, während starke Verdeckung, überfüllte Szenen oder abrupte Kamerabewegungen zusätzliche Tests erfordern.
RunComfy ist die führende ComfyUI Plattform, die ComfyUI online Umgebung und Services bietet, zusammen mit ComfyUI Workflows mit atemberaubenden Visualisierungen. RunComfy bietet auch AI Models, Künstlern ermöglichen, die neuesten AI-Tools zu nutzen, um unglaubliche Kunst zu schaffen.
