Adobe Firefly 5: Neue KI-Modelle schneiden Videos und komponieren Musik

Firefly wird zur Adobe Max 2025 zwei Jahre alt. Zum Jubiläum ergänzt Adobe die KI zum Erstellen von Bildern und Videos um Firefly Image 5. Das neue Modell und weitere sollen zusammen das Schneiden von Videos, die Erstellung von lizenzfreier Musik und ebenengenaue Bildbearbeitung beherrschen.

Firefly mit mehr Funktionen im Web

Angetrieben werden die meisten der neuen Funktionen von Adobe Firefly Image 5, dem hauseigenen generativen KI-Modell für die Erstellung von Bildern, das sich entweder direkt über die Website abrufen lässt, oder in den Creative-Cloud-Apps integriert wird. Der Webauftritt bekommt mit den neuen Features eine noch größere Bedeutung, denn der Konzern macht Firefly zum Sammelpunkt von noch mehr Funktionen als zuvor und integriert auch bestehende aus Adobe Express direkt in Firefly.

Zudem werden die bisher nur für Enterprise-Kunden verfügbaren Funktionen wie das simultane Bearbeiten mehrerer Bilder sowie die von Nutzern anpassbaren Firefly-Custom-Modelle demnächst für alle Nutzer zugänglich. Bei letzteren können Nutzer mit eigenen Bildern als Input ein Modell auf einen bestimmten Stil anpassen – Stichwort Corporate Identity. Die Custom-Modelle sind vorerst nur über eine Warteliste zugänglich und bleiben privat, bis der Nutzer sie anderen Anwendern zur Verfügung stellt.

Firefly Image 5 als neues Flaggschiff-Modell

Das neue Modell baut auf den Vorgängern auf und liefert mit vier Megapixeln eine Auflösung von 2.000 × 2.000 Pixeln bei generierten Bildern, was auch schon Firefly 4 erreichte. Gegenüber Journalisten betont Adobe eine „photorealistische Qualität“, wobei damit freilich auch die Konkurrenz wirbt. Für Nutzer im Adobe-Ökosystem soll dennoch mit der neuen Version die Qualität, aber auch die Möglichkeiten, also für welche Zwecke die KI eingesetzt werden kann, gesteigert worden sein.

Firefly Innovations: Künstliche Sprache und Soundtracks

Adobe untermauert letzteren Aspekt vordergründig mit der Vorstellung einiger „Firefly Innovations“. Firefly 5 kann jetzt nicht nur Soundeffekte, sondern ganze Soundtracks und damit lizenzfreie Musik für Videos erstellen. Dafür kann entweder ein Prompt mittels einiger Mausklicks erstellt oder ein Video hochgeladen werden und die KI versucht herauszufinden, welche Stimmung das Video hat.

Neben dem Soundtrack hat Adobe der KI auch beigebracht „lebensecht“ zu sprechen. ComputerBase konnte die Qualität noch nicht verifizieren, der Konzern will Kreativen nun jedoch die Möglichkeit geben authentische Voice-Overs und andere künstliche Sprachaufnahme zu generieren. Wie auch Soundtrack ist Speech über eine öffentliche Beta verfügbar.

Der KI-Cutter kommt

Das neue KI-Modell und die dazugehörige Softwareumgebung ermöglichen auch einen KI-Video-Editor, mit dem Kunden, die KI per Prompt ans Werk lassen können. Damit müssen manche Bearbeitungen nicht mehr per Hand erfolgen, die KI soll Frame-Genau für den Nutzer Hand anlegen können. Firefly soll neben der Erstellung von eigenem generativem Content auch bestehendes (generiertes und nicht-generiertes) Material schneiden können. Anwender erhalten Zugriff auf eine ganze Bibliothek an Inhalten, die sie zuvor erstellt haben. Der Zugriff erfolgt über das Webinterface, jedoch nur für Nutzer, die in die private Beta nächsten Monat eingeladen wurden.

Ebenengenaue Bildbearbeitung per Drag und Drop

Eine weitere „Innovation“: Firefly Image 5 kann Bilder jetzt selbst in Ebenen einteilen und erkennt Objekte, Hintergründe, Vordergründe und damit die Tiefe im Bild. Nutzer können das Bild dann beliebig verändern, etwa einen Stift im Foto verschieben oder einen Monitor entfernen/hinzufügen. Sind auf dem Bild Details eigentlich nicht vorhanden, wird auf generative KI gesetzt, um Objekte zu vervollständigen. Adobe verbindet mit dem „Layered Image editing“ eine ganze Reihe an bekannten Funktionen und bündelt sie in einem Produkt.

Text in Bildern editieren

Gezeigt hat Adobe auch, wie KI Text in einem Bild erkennt und diesen dann zur Bearbeitung aktiviert. Mittels generativer KI hat der Konzern etwa den Text in Graffiti an einer Mauer bearbeitet. Auch wenn auf den zweiten Blick die von der KI gewählte Schriftart nicht identisch war, war sie relativ ähnlich. Dort, wo durch den neuen Text nun kein Graffiti mehr ist, wurden die Ziegel der Mauer ebenfalls nachgefüllt. Viele Funktionen sollen demnächst mit Warteliste oder direkt als öffentliche Beta starten. Die Zugänge sollen aber demnächst ausgebaut werden und mehr Nutzer sollen Zugriff erhalten. Qualität und Zuverlässigkeit könnten sich daher im Laufe der Zeit noch (positiv) ändern. Der Zugriff erfolgt über Firefly Boards.

Mehr Kooperationen mit Drittanbietern

Künftig will Adobe eine bestimmte Auswahl an Funktionen auch über ChatGPT anbieten, Firefly damit also auch indirekt in Produkte von Drittanbietern bringen. Doch auch eigene Produkte wie Photoshop oder Express werden mit neuen, dedizierten KI-Funktionen ausgestattet und erhalten natürlich Zugriff auf Firefly 5 für bestehende Features.

ComputerBase hat Informationen zu diesem Artikel auf einem Event von Adobe in den USA erhalten. Die Kosten für Anreise, Abreise und Hotelübernachtungen wurden von Adobe getragen. Eine Einflussnahme des Herstellers auf die oder eine Verpflichtung zur Berichterstattung bestand nicht.