„Runway ML“ revolutioniert die Welt der KI-Videoproduktion, indem es Nutzern ermöglicht, mit künstlicher Intelligenz beeindruckende KI-Videos beziehungsweise AI-Videos zu kreieren. Dabei verwandelt die innovative Anwendung einfache Texteingaben wie auch vorhandene Bild- oder Videomaterialien in erstaunlich faszinierende Videoclips. Das eigene professionelle Video mit KI erstellen wird so für einen Massenmarkt wesentlich leichter möglich.
Durchaus faszinierend gehen die Möglichkeiten von Runway ML weit über die Neugestaltung von Videos hinaus. So bietet die Anwendung eine Palette von Bearbeitungswerkzeugen, die so manch zeitaufwändige Aufgabe extrem vereinfachen. Nutzer können beispielsweise Hintergründe aus Videos entfernen, Personen und Gegenstände retuschieren, Super-Zeitlupeneffekte hinzufügen oder Kamerafahrten um Objekte herum erstellen. Wie gesagt, das alles sind Prozesse, die gestern noch extrem aufwändig waren. Wie noch nicht gesagt: Noch sind wir nicht im KI-Himmel gelandet, aber dazu kommen wir später.
Runway is an applied AI research company shaping the next era of art, entertainment and human creativity.
(Runway über Runway)
Darüber hinaus enthält Runway ML auch nützliche Audio-Bearbeitungswerkzeuge. So kann die App für professionelle AI-Videos störende Hintergrundgeräusche eliminieren, ungewollte Pausen entfernen, automatisch Untertitel generieren oder Videos in Text umwandeln. Diese umfassenden Funktionen machen Runway ML zu einer bahnbrechenden Lösung im Bereich von KI-Videos und Videoproduktion. Letztlich ist Runway ML sowohl für Profis als auch für sogenannte Hobbyisten in Sachen AI-Videos sehr attraktiv.
Faktencheck
Es gibt Investoren und es gibt einen sich stark entwickelnden Markt. Sozusagen ist Runway on the Run. Wir beleuchten hier noch einige wichtige Fakten rund um das Thema Runway.
Das bietet Runway ganz konkret
Runway ist eine vielseitige Plattform zur Erstellung und Bearbeitung von Ki-Bildern und KI-Videos bzw. AI-Videos mit verschiedenen KI-Modellen. Das Ganze wurde als eine Möglichkeit zur KI-Videoproduktion entwickelt und ist über einen Webbrowser oder als Desktop-App zugänglich. Außerdem ist und gilt Runway ML als benutzerfreundlich und unterstützt Integrationen mit bekannten Generatoren wie etwa Midjourney.
Auch können Nutzer eigene Medien importieren oder auf eine umfangreiche Bibliothek zugreifen. Zu den spannenden Funktionen gehören die Umwandlung von Text in Bilder und vor allem die Bearbeitung von Bildern und AI-Videos in faszinierende KI-Videos.
Wer investiert in Runway?
Die KI-Videoproduktion an sich gehört zu den kommenden großen Themen und es überrascht nicht, dass Runway hier nicht nur Aufmerksamkeit erfährt, sondern auch finanzielle Zuwendungen.
So hat Runway Mitte 2023 eine Erweiterung seiner Serie-C-Finanzierungsrunde bekanntgegeben, die 141 Millionen Dollar beträgt. Zu den Investoren gehören namhafte Unternehmen wie Google, Nvidia und Salesforce. Dies deutet auf ein starkes Interesse und Vertrauen in die Zukunft der generativen KI-Technologien und deren Anwendungsmöglichkeiten in der Multimedia-Inhaltsentwicklung hin.
„Wir konzentrieren uns darauf, wie wir die Grenzen der Kreativität weiter verschieben können“, so äußerte sich Runway-CEO Cris Valenzuela TechCrunch und erklärte zugleich, was das frische Geld bewirken soll: „Die zusätzliche Finanzierung ermöglicht es uns, dies zu verdoppeln und neue Tools für Künstler und Kreative zu entwickeln.“
Insgesamt gilt Runway als eines der am besten finanzierten generativen KI-Startups auf dem Markt. Wiederum sind Lösungen für AI-Videos bis dato aber auch noch eine Rarität.
Wann, wo und von wem wurde Runway gegründet?
Das Unternehmen wurde 2018 von Valenzuela, Alejandro Matamala und Anastasis Germanidis gegründet. Valenzuela lernte Matamala und Germanidis während ihres Kunststudiums an der NYU kennen, wo das Trio feststellte, dass sie die Neugier auf das kreative Potenzial der KI teilten. Von dort aus begannen Valenzuela, Matamala und Germanidis mit der Entwicklung einer Reihe von KI-gestützten Tools, die sich an Filmemacher, Kameraleute und Fotografen richten.
Worauf liegt der Fokus von Runway?
Der Fokus von Runway hat sich im Laufe der Jahre auf generative KI verlagert, wobei besonders das Thema Bewegtbild im Fokus steht. Das aktuelle Flaggschiff des Unternehmens ist Gen-2. Hierbei handelt es sich um ein KI-Modell, das AI-Videos aus Textaufforderungen oder einem vorhandenen Bild generiert.
Was ist das AI Film Festival?
Das Start-up hat kürzlich ‚Runway Studios‘ gegründet, eine Unterhaltungssparte, die als Produktionspartner für Unternehmenskunden fungiert. Außerdem wurde das AI Film Festival ins Leben gerufen, eine Veranstaltung, die laut Runway eine der ersten ist, die sich auf Filme konzentrieren, die ganz oder teilweise mit KI produziert wurden.
Wer sind die Kunden von Runway?
Valenzuela, einer der Gründer von Runway sagt, dass der Kundenstamm von Runway aktuell aus Fortune-500- und Global-2000-Unternehmen besteht, darunter New Balance wie eben auch ‚Millionen‘ von selbstständigen Kreativen. Wie auch immer, der kontinuierlich wachsende Kundenstamm von KI-Unternehmen überrascht nicht: In einer kürzlich durchgeführten Umfrage von FreshBooks gaben 25 % der Unternehmen an, generative KI-Tools zu testen, während rund 33 % planen, generative KI innerhalb des nächsten Jahres in ihren Arbeitsprozessen auszuprobieren.
Willkommen in der Welt der effizienten KI-Videoproduktion
Mit Runway lassen sich Bilder erstellen. Darin ist das Programm aber nicht führend, stattdessen ist es als KI-Programm für die Entwicklung von Videos aus Bildern wie auch die Umarbeitung von KI-Videos bekannt geworden.
Hier nun ein Beispiel von Michael Mainka beziehungsweise 21 Million Lights, welches eigens für diese Seite entwickelt wurde. Bei dem KI-Video ging es vor allem darum, einen schnellen und nachvollziehbaren Prozess darzustellen.
Ein Video mit KI erstellen – und das in wenigen Schritten
Während die Erstellung von AI-Bildern immer mehr Freunde gewonnen hat und auch die Werbe- und Online-Agenturen auf diesen Zug aufspringen, sieht es bei AI-Videos bzw. KI-Videos noch etwas mau aus. Das hat schlicht und ergreifend vor allem damit zu tun, dass die entsprechenden KI-Videos bisher nicht einfach zu erstellen waren. Anders gesagt: Die KI-Videoproduktion war bisher sehr zeitaufwendig.
Runway schließt hier die bisherige Marktlücke und bietet sich als effektives Programm an, welches nahezu intuitiv zu bedienen ist. Damit das keine Floskel bleibt, zeigen wir hier die wichtigsten Schritte bezüglich der KI-Videoproduktion mit Runway ML.
1. Bildervorbereitung
Ein Video mit KI erstellen ist immer noch eine aufwendige Angelegenheit, zumindest wenn man den Prozess zum ersten Mal durchführt. Wir haben hier einen bewährten Weg gewählt:
Auf Midjourney werden zweimal vier Bilder mit dem gleichen Prompt erstellt. Der Eingabebefehl beziehungsweise Prompt lautet für alle gleich: Insect People play musical instruments.
Die Ergebnisse wurden hier nicht weiter optimiert, einfach um darzulegen, dass ein Film, etwa als schnelle Skizze, auch innerhalb von wenigen Stunden fertig gestellt werden kann.
2. Start in Runway
Um unser Video mit KI zu erstellen, setzen wir den klassischen Weg fort und beginnen das erste Bild über den lilafarbenen Button zu importieren.
3. Feinsteuerung mit Pinsel
Das betreffende Bild wird in einer Maske angezeigt, welche wiederum verschiedene Möglichkeiten der Bearbeitung anbietet.
Wir starten hier mit dem Pinsel, welcher die Feinsteuerung von damit markierten Bereichen zulässt.
Neu ist aktuell die Auswahl von gleich 6 Pinseln. Damit lassen sich jetzt auch Gegenbewegungen im Bild erzeugen. Zum Beispiel indem man die Figuren die Arme nach oben strecken lässt und umgekehrt die Beine nach unten. Jedem Pinsel können also eigene Funktionen durch die betreffenden Regler zugewiesen werden.
Übrigens kann somit auch ein Umgebungsdetail gut markiert und somit animiert werden.
4. Steuerung mit generellen Befehlen
Ein Video mit KI zu erstellen ist bis hierhin nicht so schwer gewesen und auch die generellen Funktionen, die in diesem Schritt getätigt werden, sind nicht kompliziert.
Die untere Befehlsleiste enthält unter anderem den ‚Motion-Regler‘, der als Standardeinstellung auf 5 steht. Werden die Pinsel zum Beispiel nicht benutzt, dann kann es von Vorteil sein, diesen Regler höher einzustellen, etwa auf den Wert 7. Alles im Bild Dargestellte wird sich dann im Film stärker bewegen.
Der Button ‚Camera Motion‘ führt zu einem umfangreichen Regler-Menü, welches weitestgehend selbsterklärend ist. In der Regel reicht es hier, lediglich eine Einstellung zu verändern, um eine Kamerafahrt entstehen zu lassen.
5. Finish
Da wir hier keinen Hollywood-Streifen abgedreht haben, reicht eine einfache Nachbearbeitung beziehungsweise Zusammenstellung in Adobe Premiere Run. Bei dem Programm handelt es sich um eine vereinfachte Variante des weit komplexeren Programms Adobe Premiere.
Letztlich bietet aber auch Runway ein sehr einfaches Programm zur Filmbearbeitung, welches aber aktuell nur als Beta-Version zur Verfügung steht.
Highlights in Sachen KI-Videos MIT RUNWAY
Na gut, diese besagten ‚Highlights‘ sind hier etwas großspurig angekündigt. Zum einen, weil Runway zurzeit noch nicht das ganz große Potenzial für kulturelle Highlights an sich bietet. Das kann sich allerdings innerhalb der nächsten ein oder zwei Jahre durchaus ändern.
Daneben interessiert es den geneigten Leser wahrscheinlich eher, was in Sachen KI-Videoproduktion mit Runway heute bereits möglich ist. Das haben wir verstanden und bieten an dieser Stelle eine kleine Auswahl an Produktionen, die mit Runway entstanden sind.
In Conversation with Julien Vallée
Julien Vallée ist ein renommierter kanadischer Grafikdesigner und Art Director sowie Mitbegründer des Studios Vallée Duhamel in Montreal. Sein Werk zeichnet sich durch die Verbindung von manuellen und digitalen Prozessen aus.
Vallée, der seine Karriere mit Stop-Motion-Animationen und Papierarbeiten begann, hat für Kunden wie Google, Apple und The New York Times gearbeitet. Zudem gehört er mittlerweile zum Runway Creative Partners Program. Der hier untergebrachte Film ist wiederum Teil dieses AI-Videos Programms.
Nightmare n°24 — Leo Cannone
In Runway werden Bilder sozusagen zum Laufen gebracht. Das geschieht zumindest in dem Teil des Programms, der aus Bildern KI-Videos generiert.
Der Nachteil lautet: Der Künstler muss hier eine Geschichte so erzählen, dass diese sich aus statischen Bildern entwickeln muss, die jeweils maximal 16 Sekunden animiert werden können. Manche Filme wie der hier vorliegende schaffen es, aus der beschriebenen Not eine Tugend zu machen.
Runway? Möglicherweise der nächste KI-Hit!
Beginnen wir erst einmal mit einem Problem: Menschen lieben artifizielle Videos mit angesagter Musikuntermalung. Das ist arbeitstechnisch gar nicht mal der schwierigste Part innerhalb der KI-Videoproduktion, aber es ist ein heikler. Zum einen muss die Musik halt zu den Bildern passen, daher langwierig ausgesucht und letztlich auch bezahlt werden.
Es könnte einfacher, günstiger und genialer sein: Zum Beispiel bietet TikTok für die KI-Videoproduktion eine sehr große Auswahl an urheberrechtlich abgesicherten Musiktiteln kostenfrei an. Der Haken: TikTok (und möglicherweise auch YouTube) steht in ständigen Verhandlungen mit der Musikindustrie. Durchaus kann es geschehen, dass die mit ‚TikTok-Musik‘ untermalten Titel bald schon verstummen. Da aktuell viele solcher Videos mit Runway erstellt werden, sollte diese Info hier nicht fehlen.
Kommen wir endlich zum eigentlichen Fazit: Runway ML macht Spaß, ist einfach – und führt zu guten Ergebnissen. Wobei das Finetuning immer noch ein Problem darstellt. Für Profis ist gerade letzteres ein gewichtiges Thema.
Und dann ist da noch die Sache mit dem Preis. Will man weit mehr als zwei, drei kleine Filme mit Runway ML bearbeiten, dann kommt nur das zweitgrößte Filmpaket in Frage und das kostet derzeit um die 75 Dollar pro Monat. Das wiederum ist ein stolzer Preis, bei dem dann so mancher angehende KI-Videokünstler zurückschrecken dürfte.
Related Posts
Midjourney: Das angesagteangesagte KI-ProgrammKI-Programm zur Bildgenerierung
Wissen über Midjourney. Und wie man dieses anwendet! Midjourney? Das
Die Geschichte derder KI-KunstKI-Kunst
Kunst und KI-Kunst: Eine Zeitreise Löst KI-Kunst beziehungsweise AI-K
