Wir stellen unser neues Video-Modell Runway Gen-4.5 vor. Zuvor bekannt als Whisper Thunder (auch bekannt als) David. Gen-4.5 ist hochmodern und setzt einen neuen Standard für die Bewegungsqualität der Videoerzeugung, die Einhaltung von Eingabeaufforderungen und die visuelle Treue. Erfahren Sie mehr unten.

Runway Gen-4.5 stellt bedeutende Fortschritte sowohl in der Effizienz der Vortrainingsdaten als auch in den Nachtrainingstechniken für Videomodelle dar und dient als unser neues Fundamentmodell für die Weltmodellierung. Gen-4.5 erzielte 1.247 Elo-Punkte in der Rangliste für Künstliche Analyse Text zu Video und setzte einen neuen Standard, der alle anderen KI-Videomodelle der Welt übertrifft.

Vor zwei Jahren haben wir Gen-1 eingeführt, das erste öffentlich verfügbare Video-Generierungsmodell. Es ermöglichte eine völlig neue Form kreativen Ausdrucks und schuf eine neue Produktkategorie. In den letzten zwei Jahren haben wir die Branche angeführt, um Video-Modelle leistungsfähiger und kontrollierbarer zu machen, von bedeutenden Verbesserungen des Basis-Modells bis hin zu neuen Steuerungen und allgemeinen Bearbeitungsmöglichkeiten. Heute stellen wir Gen-4.5 vor – den Höhepunkt eines langen Forschungsaufwands zur Verbesserung des Pre-Trainings und Post-Trainings von Video-Modellen.

Das Modell zeichnet sich durch das Verständnis und die Ausführung komplexer, sequenzierter Anweisungen aus. Sie können detaillierte Kamerachoreografien, komplexe Szenenkompositionen, präzise Zeitabläufe von Ereignissen und subtile atmosphärische Veränderungen alles innerhalb eines einzigen Prompts angeben. Wir bleiben verpflichtet, hochgradig kontrollierbare und flexible Werkzeuge zu entwickeln, die Ihnen helfen, Ihre genaue Vision zum Leben zu erwecken. Neben Text zu Video werden wir alle bestehenden Steuerungsmodi (Bild zu Video, Keyframes, Video zu Video) und mehr zu Gen-4.5 bringen.

Gen-4.5 erreicht ein beispielloses Niveau an physikalischer Genauigkeit und visueller Präzision. Objekte bewegen sich mit realistischem Gewicht und Schwung. Oberflächen verhalten sich so, wie sie es in der realen Welt tun würden. Die Gesetze der Physik können je nach Ihrer Vision sowohl beobachtet als auch ignoriert werden. Trotz des großen Sprungs in den Fähigkeiten bleiben Einschränkungen bestehen, wie z. B. Fehler im kausalen Denken und in der Objektpermanenz. Wir glauben, dass diese Fehlermodi angegangen werden müssen, um die Weltmodellierung weiter voranzutreiben, und arbeiten aktiv daran, sie zu lösen.

Gen-4.5 wurde vollständig auf NVIDIA GPUs während der initialen Forschung und Entwicklung, des Vortrainings, des Nachtrainings und der Inferenz entwickelt. Wir haben umfangreich mit NVIDIA zusammengearbeitet, um die Grenzen dessen, was in der Optimierung von Videodiffusionsmodellen möglich ist, zu erweitern, von der Trainingseffizienz bis zur Inferenzgeschwindigkeit. Die Modellinferenz läuft auf NVIDIA Hopper und Blackwell Serien GPUs und bietet optimierte Leistung, ohne die Qualität zu beeinträchtigen. Ein branchenführender Ansatz, der es Gen-4.5 ermöglicht, beispiellose Fähigkeiten zu erreichen.

Wir führen schrittweise den Zugang zu Runway Gen-4.5 ein. Es wird in den kommenden Tagen für alle verfügbar sein. Erfahren Sie mehr:

Gen-4.5 wurde vollständig auf @nvidia GPUs während der initialen Forschung und Entwicklung, des Vortrainings, des Nachtrainings und der Inferenz entwickelt. Wir haben umfangreich mit NVIDIA zusammengearbeitet, um die Grenzen dessen, was in der Optimierung von Videodiffusionsmodellen möglich ist, zu erweitern, von der Trainingseffizienz bis zur Inferenzgeschwindigkeit. Die Modellinferenz läuft auf NVIDIA Hopper und Blackwell Serien GPUs und bietet optimierte Leistung, ohne die Qualität zu beeinträchtigen. Ein branchenführender Ansatz, der es Gen-4.5 ermöglicht, beispiellose Fähigkeiten zu erreichen.

@nvidia Wir rollen schrittweise den Zugang zu Runway Gen-4.5 aus. Es wird in den kommenden Tagen für alle verfügbar sein. Erfahren Sie mehr: