Firefly – die neue generative KI von Adobe

Prompt: »a firefly with huge fire flames on its wings« (Alle Bilder: Olaf Giermann mit Adobe Firefly) Firefly ist der Sammelbegriff für eine ganze Familie generativer KI-Modelle, deren erste zwei Module »Text to image« und »Text effects« Adobe im März 2023 als Beta-Version veröffentlichte und schrittweise für immer mehr Benutzer freischaltet. Olaf Giermann gibt einen Überblick, was die neue Kreativwerkstatt bietet, wie sie funktioniert und was Sie in Zukunft davon erwarten können. 01 Die Betaversion Der Ansturm bei der Veröffentlichung von Firefly war groß. Adobe schaltet zwar täglich Tausende von Nutzern frei, aber hier ist auch auf längere Sicht wohl noch etwas Geduld gefragt. Auf der Website http://firefly.adobe.com können Sie sich mit Ihrer Adobe-ID anmelden (a), falls Sie schon Zugang erhalten haben. Ansonsten klicken Sie auf »Request access« (b) und füllen das anschließende Antragsformular aus, in dem nach Ihren beruflichen und kreativen Erfahrungen gefragt wird. Während der Beta-Phase von Firefly ist der cloudbasierte Dienst kostenlos. Das gibt nicht nur den Nutzern unbegrenzten kreativen Spielraum, sondern auch Adobe die Möglichkeit, die KI anhand der erfolgten Eingaben und des optionalen Nutzer-Feedbacks zu optimieren. Ein kommerzieller Einsatz der Ergebnisse ist während der Beta-Phase untersagt, und den generierten Bildern wird in der unteren linken Ecke ein Wasserzeichen hinzugefügt (c). 02 Aktuelle und geplante Funktionen Adobe hat offensichtlich Großes mit der Firefly-Plattform vor. Zurzeit haben Sie zwar nur die Wahl zwischen »Text to image« (a), also das Erzeugen von Bildern per Texteingabe, und »Text effects« (b), die das kreative Befüllen von Schriftzügen mit Bildinhalten anhand von Text ermöglichen – wie etwa in der Überschrift oben zu sehen. Auf http://firefly.adobe.com stellt Adobe aber schon weitere text- und skizzenbasierte KI-Modelle in Aussicht, die Vektorgrafiken erzeugen und einfärben, User-Fotos variieren und stilisieren, einzelne Bild-Elemente austauschen, Bilder über ihre Grenzen hinaus erweitern, 3D-Modelle in fertige Bilder verwandeln, Muster- und Pinselvorgaben und sogar komplette Mock-ups erzeugen, bei denen Sie die Inhalte nach Belieben austauschen können. Auch eine nahtlose Integration in Photoshop, Illustrator und InDesign hat Adobe erwähnt. Was das alles kosten soll und ob es auch offline funktioniert, ist noch offen. 03 Einschränkungen Eine kommerzielle Nutzung ist, wie schon erwähnt, während der Beta-Phase ausgeschlossen. Adobe will jedoch sicherstellen, dass zukünftig diesbezüglich Rechtssicherheit besteht. Das wäre ein großer Pluspunkt gegenüber allen anderen aktuellen generativen KIs wie etwa Midjourney oder Stable Diffusion. Momentan unterstützt Firefly ausschließlich englische Eingaben. Sobald Sie etwas auf Deutsch eingeben, erhalten Sie einen entsprechendenden Hinweis (a). Die Unterstützung auf Mobilgeräten ist noch eingeschränkt (b). Ziemlich restriktiv ist aktuell der Begriffe-Filter, mit dem Adobe offenbar eine missbräuchliche Verwendung verhindern will. Schon Wörter wie „explosion“, „death“ (etwa für Death Metal) oder „LSD-style“ lassen einen Warnhinweis erscheinen (c). Eine Sperre wie bei Midjourney brauchen Sie jedoch (noch?) nicht zu befürchten. TIPP: Schreiben Sie Ihre Eingaben auf Deutsch und lassen Sie sie dann per www.deepl.com (d) oder ChatGPT übersetzen. 04 Text-to-image-Prompt und Download Der Einstieg in die textbasierte Bilderzeugung ist bei Firefly mit keinen Hürden wie bei Midjourney (verwirrende Discord-Plattform und versteckte Befehle) oder Stable Diffusion (komplizierte Installation) verbunden. Geben Sie einfach Ihren Prompt (Eingabe) in das Textfeld (b) ein und klicken Sie auf »Generate« (c). Über dem Textfeld erhalten Sie dann vier Ergebnis-Variationen in der aktuell maximalen Größe (je nach Seitenverhältnis 1024 Pixel auf der kürzeren Seite). Wie Sie beim Zusammenstellen eines Prompts geplant vorgehen und welche Parameter dabei eine Rolle spielen, erfahren Sie in meinem Artikel „Wie man mit einer KI spricht“ in DOCMA 105 ab Seite 16 und im Artikel „Promptologie“ (hier im Heft ab Seite 10 ff). Zum Speichern eines der Bilder klicken Sie auf die »Download«-Schaltfläche (a). Leider wird der Prompt nicht in die Metadaten, sondern stattdessen in den Dateinamen eingesetzt. Das kann bei sehr langen Prompts dazu führen, dass das Bild nicht korrekt gespeichert wird. In diesem Fall kopieren Sie das Bild am einfachsten in die Zwischenablage und fügen es in Photoshop ein. 05 Variationen erzeugen Falls Ihnen keines der Resultate gefällt, klicken Sie auf »Refresh« (b), um völlig neue Ergebnisse anhand Ihrer eingegebenen Beschreibung zu erzeugen. Das können Sie im Prinzip so lange fortführen, bis Sie zufrieden sind. Besser ist es meist, den Prompt oder die Parameter (siehe Schritt 6) anzupassen. Gefällt Ihnen jedoch eines der vier Bilder und Sie möchten davon ähnliche Varianten generieren lassen, klicken Sie auf »Show similar« (a). Sie erhalten dann drei weitere Vorschläge, bei denen Sie wiederum beim jeweils besten Bild auf »Show similar« klicken, um den Verfeinerungsprozess erneut anzustoßen. Auch das können Sie prinzipiell endlos fortführen, bis Sie mit dem Ergebnis zufrieden sind. Solange Sie aber die Vorgaben für Format, Inhalt und Stil nicht ändern, werden Sie immer sehr ähnliche Bilder erhalten, die sich zwar in den Details, aber nicht in der generellen Anmutung unterscheiden. 06 Seitenleiste: Formate, Inhalt und Stile … In der rechten Spalte auf der Firefly-Seite wählen Sie die Eckpfeiler der Bildkreation. Unter »Aspect ratio« (a) legen Sie das Seitenverhältnis fest (4:3 im Hoch- oder Querformat, Quadratisch oder 16:9). Mit dem »Content type« (b) weisen Sie Firefly an, ob Sie eher ein Foto, eine Grafik oder ein gemaltes Bild wollen oder ob Ihnen das egal ist (»None«). Mit fotorealistischen Ergebnissen sollten Sie bei »Photo« aber (noch) nicht rechnen, diesbezüglich hat Firefly Aufholbedarf zu Midjourney und Stable Diffusion. Bei den »Styles« (c) wählen Sie die erste Option »All«, um alle vorgefertigten Stile anzuzeigen und einen davon auswählen zu können. Die Option »Popular« zeigt die gerade angesagtesten Stilvorgaben an, die Sie Ihrem Prompt mit einem Klick zuweisen. Die Unterschiede dieser Stile sind bei gleichem Prompt derzeit offensichtlich vernachlässigbar (g). Mit »Color and tone« (d) legen Sie die Farbgebung (mehr oder weniger bunt bis schwarzweiß) fest. »Lighting« (e) bietet fünf verschiedene Vorgaben für die Beleuchtung (Gegenlicht, dramatisches Licht, Studiolicht, Goldene Stunde …). »Composition« (f) beinhaltet Optionen, mit denen sich die Perspektive und der Aufnahmeabstand variieren lässt (»Blurry background«, »Wide angle«, »Close up«, »Macrophotography«, »Shot from below/above« …). Die Userexperience (UX) ist schon besser als bei der Konkurrenz, braucht aber noch einiges an Finetuning. Beim Ändern eines der genannten Parameter werden aktuell die vier Vorschaubilder von Firefly mitunter sofort aktualisiert. Das ist zwar nervig, weil man die vorigen Ergebnisse verliert, man kann aber schon während der Neuberechnung jederzeit – leider ohne Vorschau – Korrekturen an den Parametern eingeben. Bei manchen Änderungen müssen Sie auf »Generate« klicken, um die Neuberechnung zu starten. Einige über die Seitenleiste zugewiesene Parameter erscheinen als Kacheln (h) unterhalb Ihres Prompts. Klicken Sie auf »Clear styles«, um alle zu entfernen oder auf das »×«-Symbol des Stils, den Sie entfernen möchten. 07 Referenzbild festlegen und variieren Eigene Fotos und Skizzen lassen sich derzeit in Firefly noch nicht einspeisen und per Texteingabe verfeinern. Sie können jedoch ein von Firefly erzeugtes Bild über das Drei-Punkte-Menü (a) als »Reference image« festlegen. Über einen Schieberegler (b) legen Sie dann fest, wie stark sich eine neue Bild-Erzeugungsrunde an dieses Referenzbild oder an den Prompt halten soll. Je weiter Sie den Regler nach rechts ziehen, umso mehr Abweichung vom Referenzbild und damit freiere Interpretation erlauben Sie. Wenn Sie ein Referenzbild festgelegt haben, erscheint dieses links vom Prompt-Eingabefeld (c). Um es zu entfernen, klicken Sie einfach auf das »×«-Icon in der oberen rechten Ecke. 08 Texteffekte Im Bereich »Texteffects« (siehe Schritt 2) lassen sich Buchstaben mit Elementen füllen, die Sie per Text beschreiben. Geben Sie den gewünschten Schriftzug (a) und daneben Ihren Prompt (b) ein. Rechts auf der Webseite erscheinen nach dem Abschicken die Optionen mit verschiedenen Beispieleffekten (c). Klicken Sie auf »View all«, um alle einzublenden. Mit »Text Effect Fit« (d) legen Sie fest, wie genau sich die eingefügten Elemente an die Form der Buchstaben halten sollen. »Loose« gibt dabei mehr kreativen Spielraum. Unter »Font« (e) und »Color« (f) wählen Sie eine von zwölf vorgegebenen Schriftarten und die Farbe des Textes. Praktisch: Die Texteffekte werden auf einem transparenten Hintergrund ausgegeben, so dass sie sich ohne Freistellen kreativ mit weiteren Elementen kombinieren lassen. Die grafische Qualität ist dabei erstaunlich gut, so dass es Spaß macht, immer neue Ideen (g) umzusetzen. Tipp: Sie können als Schriftzug auch Sonderzeichen und Emojis nutzen, und so etwa ein Herz stilisieren (h). 09 Versteckte Prompt-Parameter In rechteckigen Klammern lassen sich zusammen mit Ihrem Bildbeschreibungs-Prompt einige Parameter eingeben, die das Ergebnis stark beeinflussen können. Diese Parameter sind noch nicht dokumentiert und es ist möglich, dass Adobe sie während oder nach der Beta-Phase entweder deaktiviert oder – wünschenswerterweise – anwenderfreundlich über entsprechende Bedienelemente zugänglich macht. Am wichtigsten ist für das Ergebnis wohl der Parameter »iterations« (Berechnungsdurchläufe). Kleine Werte (Mindestwert: iterations=5) erzeugen eher detailarme, unfertig wirkende Ergebnisse (a). Höhere Werte (Maximalwert: iterations=60) benötigen zur Fertigstellung spürbar länger, liefern aber vor allem bei gewünschtem Fotorealismus deutlich bessere und detaillierte Ergebnisse (b). Der Standard von Firefly liegt in der Mitte bei 30. Merken sollten Sie sich auch den Parameter »avoid«. Mit diesem erzeugen Sie negative Prompts, in denen Sie Firefly mitteilen, was Sie alles nicht sehen möchten. Um also etwa in einer Stadtszene keine Autos zu erhalten, hängen Sie avoid=cars,vehicles,trucks ans Ende Ihres Prompt. Mehrere Begriffe trennen Sie wie gezeigt durch ein Komma. Für das Optimieren von Gesichtern gibt es den Tag »fix-face« mit einer Bandbreite von 0 bis 100. Höhere Werte sorgen in der Regel für glaubwürdigere Gesichter. Empfehlenswert ist es, diesen Tag zu verwenden: »fix-face=enhance, x« und bei x den gewünschten Wert einzusetzen. Da hier aber noch alles im Fluss ist und sich jederzeit ändern kann, sei dies nur am Rande erwähnt. Bis dahin erhalten Sie allein mit den drei genannten Parametern mitunter deutlich bessere Ergebnisse von Firefly.

Als Abonnent einloggen

DOCMA 2GO abonnieren

Schreibe einen Kommentar Antwort abbrechen