Adobe Firefly 5: Neue KI-Modelle schneiden Videos und komponieren Musik
Firefly wird zur Adobe Max 2025 zwei Jahre alt. Zum Jubiläum ergänzt Adobe die KI zum Erstellen von Bildern und Videos um Firefly Image 5. Das neue Modell und weitere sollen zusammen das Schneiden von Videos, die Erstellung von lizenzfreier Musik und ebenengenaue Bildbearbeitung beherrschen.
Firefly mit mehr Funktionen im Web
Angetrieben werden die meisten der neuen Funktionen von Adobe Firefly Image 5, dem hauseigenen generativen KI-Modell für die Erstellung von Bildern, das sich entweder direkt über die Website abrufen lässt, oder in den Creative-Cloud-Apps integriert wird. Der Webauftritt bekommt mit den neuen Features eine noch größere Bedeutung, denn der Konzern macht Firefly zum Sammelpunkt von noch mehr Funktionen als zuvor und integriert auch bestehende aus Adobe Express direkt in Firefly. Die Anbindung von externen KI-Modellen gehört ebenfalls zur Strategie Firefly als Hub für generative KI zu etablieren.
Zudem werden die bisher nur für Enterprise-Kunden verfügbaren Funktionen wie das simultane Bearbeiten mehrerer Bilder sowie die von Nutzern anpassbaren Firefly-Custom-Modelle demnächst für alle Nutzer zugänglich. Bei letzteren können Nutzer mit eigenen Bildern als Input ein Modell auf einen bestimmten Stil anpassen – Stichwort Corporate Identity. Die Custom-Modelle sind vorerst nur über eine Warteliste zugänglich und bleiben privat, bis der Nutzer sie anderen Anwendern zur Verfügung stellt.
Firefly Image 5 als neues Flaggschiff-Modell
Das neue Modell baut auf den Vorgängern auf und liefert mit vier Megapixeln eine Auflösung von 2.000 × 2.000 Pixeln bei generierten Bildern, was auch schon Firefly 4 erreichte. Gegenüber Journalisten betont Adobe eine „photorealistische Qualität“, wobei damit freilich auch die Konkurrenz wirbt. Für Nutzer im Adobe-Ökosystem soll dennoch mit der neuen Version die Qualität, aber auch die Möglichkeiten, also für welche Zwecke die KI eingesetzt werden kann, gesteigert worden sein.
Firefly Innovations: Künstliche Sprache und Soundtracks
Adobe untermauert letzteren Aspekt vordergründig mit der Vorstellung einiger „Firefly Innovations“. Firefly 5 kann jetzt nicht nur Soundeffekte, sondern ganze Soundtracks und damit lizenzfreie Musik für Videos erstellen. Dafür kann entweder ein Prompt mittels einiger Mausklicks erstellt oder ein Video hochgeladen werden und die KI versucht herauszufinden, welche Stimmung das Video hat.
Neben dem Soundtrack hat Adobe der KI auch beigebracht „lebensecht“ zu sprechen. ComputerBase konnte die Qualität noch nicht verifizieren, der Konzern will Kreativen nun jedoch die Möglichkeit geben authentische Voice-Overs und andere künstliche Sprachaufnahme zu generieren. Wie auch Soundtrack ist Speech über eine öffentliche Beta verfügbar.
Der KI-Cutter kommt
Das neue KI-Modell und die dazugehörige Softwareumgebung ermöglichen auch einen KI-Video-Editor, mit dem Kunden, die KI per Prompt ans Werk lassen können. Damit müssen manche Bearbeitungen nicht mehr per Hand erfolgen, die KI soll Frame-Genau für den Nutzer Hand anlegen können. Firefly soll neben der Erstellung von eigenem generativem Content auch bestehendes (generiertes und nicht-generiertes) Material schneiden können. Anwender erhalten Zugriff auf eine ganze Bibliothek an Inhalten, die sie zuvor erstellt haben. Der Zugriff erfolgt über das Webinterface, jedoch voerst nur für Nutzer, die in die private Beta nächsten Monat eingeladen werden.
Ebenengenaue Bildbearbeitung per Drag und Drop
Eine weitere „Innovation“: Firefly Image 5 kann Bilder jetzt selbst in Ebenen einteilen und erkennt Objekte, Hintergründe, Vordergründe und damit die Tiefe im Bild. Nutzer können das Bild dann beliebig verändern, etwa einen Stift im Foto verschieben oder einen Monitor entfernen/hinzufügen. Sind auf dem Bild Details eigentlich nicht vorhanden, wird auf generative KI gesetzt, um Objekte zu vervollständigen. Adobe verbindet mit dem „Layered Image editing“ eine ganze Reihe an bekannten Funktionen und bündelt sie in einem Produkt.
Text in Bildern editieren
Gezeigt hat Adobe auch, wie KI Text in einem Bild erkennt und diesen dann zur Bearbeitung aktiviert. Mittels generativer KI hat der Konzern etwa den Text in Graffiti an einer Mauer bearbeitet. Auch wenn auf den zweiten Blick die von der KI gewählte Schriftart nicht identisch war, war sie relativ ähnlich. Dort, wo durch den neuen Text nun kein Graffiti mehr ist, wurden die Ziegel der Mauer ebenfalls nachgefüllt. Viele Funktionen sollen demnächst mit Warteliste oder direkt als öffentliche Beta starten. Die Zugänge sollen aber demnächst ausgebaut werden und mehr Nutzer sollen Zugriff erhalten. Qualität und Zuverlässigkeit könnten sich daher im Laufe der Zeit noch (positiv) ändern. Der Zugriff erfolgt über Firefly Boards.
Mehr Kooperationen mit Drittanbietern
Künftig will Adobe eine bestimmte Auswahl an Funktionen auch über ChatGPT anbieten, Firefly damit also auch indirekt in Produkte von Drittanbietern bringen. Doch auch eigene Produkte wie Photoshop oder Express werden mit neuen, dedizierten KI-Funktionen wie Chatbots ausgestattet und erhalten natürlich Zugriff auf Firefly 5 für bestehende Features.
Mehr Details von der Adobe Max
Auf der Adobe Max in Los Angeles hat der Konzern auf einer Keynote noch einmal mehr Details zu einigen Aspekten von Firefly 5 verraten. Insbesondere auf die Custom(er)-Modelle von Firefly 5 ist Adobe eingegangen und hat demonstriert, wie Nutzer mit 10 bis 30 Bildern ein eigenes KI-Bild-Modell generieren können.
Das Modell lässt sich wie andere KI-Modelle in Firefly-Anwendungen auswählen, etwa in Photoshop, und dann für das generative Auffüllen von Inhalten verwenden. In den kommenden Tagen soll die neue Funktion für erste Nutzer freigeschaltet werden.
Details zum Video Editor
Zum den Firefly Video-Editor gibt es ebenfalls einige neue Details: Eingebaut sind etwa die Sprachverbesserung, generative Audio und auch generatives Video, um schnell Bilder zu Videos zu verarbeiten. Eine Neuheit ist dabei das textbasierte Schneiden von Videos: Die KI transkribiert das zu bearbeitende Video und der Nutzer kann anhand des Transkripts entscheiden, welche Stellen bzw. Sätze entfernt werden sollen.
Hervorgehoben werden im Transkript auch stille Momente wie Denkpausen. Mit wenigen Klicks lassen sich diese dann über das Transkript auch aus der Videospur entfernen. Für den Firefly Editor soll es zudem besondere Übergänge und Special-Effekte geben.
Der Artikel wurde um weitere Informationen und Bilder ergänzt.
ComputerBase hat Informationen zu diesem Artikel auf einem Event von Adobe in den USA erhalten. Die Kosten für Anreise, Abreise und Hotelübernachtungen wurden von Adobe getragen. Eine Einflussnahme des Herstellers auf die oder eine Verpflichtung zur Berichterstattung bestand nicht.
- Adobe Premiere am iPhone: Neue App erhält exklusive Inhalte für YouTube Shorts
- OpenAI × Adobe: Photoshop und Express kommen zu ChatGPT
- Adobe Firefly 5: Neue KI-Modelle schneiden Videos und komponieren Musik
- Chatbots und Project Moonlight: Photoshop und Express erhalten einen „Creative Partner“