Adobe Firefly: tutorial

Met de komst van Dall-E, , Midjourney en Stable Diffusion zag Adobe – de gigant op het gebied van digitale contentcreatie – het gevaar aankomen: zijn positie kon ernstig onder druk komen te staan.

Want als we met een paar regels tekst elk soort beeld konden maken (fotorealistisch, illustraties, interfaces van digitale producten…), waarom zouden we dan nog zijn softwaresuite gebruiken?

Dus ging Adobe aan de slag met zijn eigen AI-tools voor contentgeneratie en bracht het er aanvankelijk twee uit (er komen er nog meer aan):

• Generatief vullen in Photoshop.
• Adobe Firefly: de beeldgenerator op basis van tekst (en nog wat meer).

In dit artikel vertel ik je over die laatste.

Over hoe die is uitgegroeid tot een uiterst nuttig hulpmiddel voor mijn dagelijkse werk.

Ik leg je uit hoe ik een aantal vrij veelvoorkomende use-cases aanpak.

Als jij vergelijkbare taken uitvoert, kun je de tool dus aan je arsenaal toevoegen en afwegen hoe die zich verhoudt tot andere mogelijkheden.

Dus, laten we bij het begin beginnen.

Wat is Adobe Firefly?

Firefly is de naam die Adobe heeft gegeven aan zijn generatieve kunstmatige intelligentie, waarmee we vanuit een tekst (prompt) beelden vanaf nul kunnen maken, bestaande beelden kunnen retoucheren of aanpassen, eenvoudig video's kunnen maken en bewerken of vectoren uit schetsen kunnen creëren.

Zoals je ziet is het behoorlijk compleet en gaat het verder dan wat alternatieven als Stable Diffusion of Midjourney op dit moment bieden, om de twee populairste te noemen.

Een ander voordeel van het feit dat het van Adobe is, is dat het geïntegreerd is in de bewerkingstools van het bedrijf, zoals Photoshop of Illustrator..

Maar voor wie die tools niet gebruikt, heeft Firefly ook een eigen webplatform, zodat iedereen er zelfstandig mee aan de slag kan.

En dat is het platform dat ik je ga uitleggen.

Toepassingen van Adobe Firefly

Om te beginnen moet je eerst naar de tool gaan en een gratis account aanmaken als je dat nog niet hebt.

Eenmaal binnen zie je dat de tool op dit moment zes gebruiksmogelijkheden heeft. Vier werken al en twee komen binnenkort beschikbaar:

Laten we ze stuk voor stuk doornemen en kijken wat ze ons kunnen bieden.

Text to image

De eerste is waarschijnlijk de bekendste en meest gebruikelijke.

Het is de directe concurrent van Midjourney of Dall-E: een beeldgenerator op basis van prompts.

Met andere woorden: wij schrijven een tekst – in het Engels – en de tool zet die om in meerdere beelden, zodat we degene kunnen kiezen die we mooi vinden of de tekst kunnen blijven aanpassen tot we krijgen wat we willen.

Gebruik

Wanneer we deze functie openen, verschijnt er een carrousel met eindeloos scrollen door beelden die met de tool zijn gegenereerd.

Als we met de muis over een van die beelden gaan, wordt de prompt getoond waarmee het is gemaakt:

Hoewel we op elk beeld kunnen klikken om de generator te openen, is het slimmer om een paar seconden te zoeken naar een beeld dat qua stijl of toon lijkt op wat we zoeken – ook al laat het beeld zelf een ander concept zien –, want dat bespaart ons later tijd bij het bewerken.

Ik maak het duidelijk met een voorbeeld:

Stel dat ik een duiker nodig heb als centraal motief voor een illustratie van de zeebodem.

Stap 1: het eerste beeld selecteren

Ik kijk en zie dit:

Voor de illustratie die ik in gedachten heb, passen deze dingen:

• Het frontale perspectief.
• De stijl van fantastisch realisme in het beeld.
• De belichting en kleurtinten.

Dus ik klik erop en de generator opent. Daar kan ik de gebruikte prompt zien en aanpassen, samen met de beeldstijlen:

Stap 2: de prompt aanpassen om een basisbeeld te krijgen

Het eerste wat ik kan doen, is de prompt aanpassen aan mijn idee.

Als ik niet goed weet hoe ik in het Engels moet uitleggen wat ik wil, kan ik een online vertaler zoals DeepL daarvoor gebruiken:

Daarna plak ik hem in Firefly en genereer ik de resultaten:

Pshhhhh…

Ja, het is wat we hebben gevraagd, maar eerlijk gezegd zitten ze ver af van wat ik zocht. Dus we moeten de beeldgeneratie nog wat verfijnen.

Ik kan vooral twee dingen doen:

#1. Een referentiebeeld gebruiken

Daarvoor ga ik vanaf de pagina met de matige resultaten terug met de terugknop van de browser, tot ik weer bij mijn oorspronkelijke ruimtekoala ben.

Op dit punt, kies ik het beeld dat ik het mooist vind en gebruik ik het als model via het pictogram met de drie puntjes dat rechtsboven verschijnt wanneer ik met de muis over het beeld ga:

Ondanks de vervorming van het gezicht worden de resultaten voor mijn doel (iets) beter:

Een paar opvallende dingen hier:

• Het meest opvallende is dat Firefly de vorm van de koalaoren heeft gebruikt om de luchtslangen te ontwerpen.
• De beelden zijn realistischer dan fantastisch omdat ik heb aangegeven dat ik content van het type "foto" wil. Hier komen we zo op terug.
• Ik kies een neutrale achtergrond zodat ik je later een volledige toepassing van de tool kan laten zien, maar als ik alleen de duikerillustratie nodig had, zou ik de achtergrond gewoon hier maken.
• We kunnen met de slider die verschijnt wanneer we op het beeld klikken bepalen hoeveel gewicht het oorspronkelijke referentiebeeld krijgt. Over het algemeen levert 50% de beste resultaten op:

Omdat ik nog steeds niet helemaal tevreden ben met de resultaten, leg ik je de tweede verbeteringsmethode uit.

#2. De prompt aanpassen

Dat is de andere manier om de eerste resultaten te verbeteren. En die is bovendien veel eenvoudiger.

Als ik de prompt hierboven verander in: "Cyberpunk diver in bright blue submarine suit, face covered, on a neutral background", zijn de resultaten voor mijn doel een stuk beter:

Nu verandert de zaak.

De twee beelden rechts, vooral het bovenste, zouden voor mij bruikbaar kunnen zijn en ik zou ze als referentie kunnen gebruiken..

En dat is precies wat ik ga doen. Het wordt mijn uitgangspunt..

Stap 3: het formaat selecteren

Belangrijk om twee redenen:

1. Het moet bij mijn illustratie passen.
2. Bij het exporteren voegt Firefly een watermerk aan het beeld toe dat de compositie in de weg zit (als we daar vooraf geen rekening mee hebben gehouden).

Later leg ik uit hoe je met het tweede probleem kunt afrekenen , maar laten we ons nu bij het eerste houden.

In het rechterpaneel staan alle opties voor de content.

De eerste is het kiezen van het formaat (ratio):

We kiezen het formaat dat het beste past bij de compositie die we in gedachten hebben.

Je kunt het later kiezen of wijzigen, maar je moet weten dat het gegenereerde beeld zal veranderen (in ons voorbeeld de duiker). Met andere woorden: niet alleen het formaat verandert. Wanneer het beeld opnieuw wordt gegenereerd, is het niet identiek en verandert het in meer of mindere mate. Daarom raad ik aan het nu te kiezen.

Ik houd het vierkante formaat, dat erg veelzijdig is.

Stap 4: het type beeld kiezen

Direct onder het formaat beginnen we het beeld de gewenste toon te geven.

Standaard interpreteert Firefly op basis van de prompt welke connotaties we willen: dat "cyberpunk" uit mijn voorbeeld stuurt het resultaat bijvoorbeeld.

Om te beginnen bepalen we of we het volgende nodig hebben:

#1. Een foto

Zoals je ziet verandert de oorspronkelijke stijl ("None") niet al te veel.

#2. Een "graphic"

Dat is de illustratie- of "digitale" ontwerpversie van het vorige beeld.

#3. Een artistieke stijl.

In tegenstelling tot het vorige beeld heeft deze illustratie een veel schilderachtiger of artistieker karakter. Meer "analoog", als je wilt.

Zoals je ziet bepalen we nu al veel nauwkeuriger welk type beeld we willen. Maar wacht, er komt nog behoorlijk wat.

Stap 5: de stijl bepalen

In mijn geval gebruik ik fotografie, omdat ik zoals gezegd een stijl van fantastisch realisme zoek. Ik wil dus dat het eerste basisbeeld realistisch is.

Nu is het tijd om de fantastische toon toe te voegen, dus laten we een beetje magie gebruiken.

Klik eerst op de knop "All" om alle mogelijkheden te zien, en dat zijn er nogal wat:

Je hebt verschillende "stromingen", "thema’s", "technieken", "effecten", "materialen" en "concepten" om mee te spelen.

En je kunt ze met elkaar combineren.

Dus doe dat.

Probeer.

Experimenteer.

Veel plezier.

Als tip zou ik wel aanraden de verschillende keuzes één voor één toe te passen, zodat je kunt zien welk effect elke keuze op het beeld heeft.

Zo houd je enige controle, want als je er meerdere tegelijk toepast, weet je niet welke keuze precies het effect geeft dat je mooi vindt:

Het is wel belangrijk om te weten dat de stijlen die je aan het beeld geeft ZEER sterk worden beïnvloed als je een referentiebeeld gebruikt.

Dit is het resultaat met dezelfde prompt en dezelfde effecten zonder een referentiebeeld:

Stap 6: kleur en toon, de laatste afwerking

We hebben onze hoofdpersoon bijna, maar we willen het beeld nog wat verder verfijnen.

Daarvoor hebben we het laatste deel van het paneel, waar we met kleuren, licht en compositie spelen (vanwaar het beeld is genomen, het type lens, enz.):

Tip:

Je moet weten dat deze details, vooral de compositie, meer invloed zullen hebben op ons beeld:

• Als we een echte achtergrond hebben toegevoegd, anders dan in dit voorbeeld waarin ik een neutrale achtergrond zoek.
• En vooral als we geen referentiebeeld gebruiken, want daardoor verdwijnen veel van deze nuances.

Stap 7: het beeld downloaden

Zodra ik het gewenste beeld heb, hoef ik het alleen nog maar hier te downloaden:

Maar tot mijn verbazing zie ik bij het openen dit:

Ohhhh.

Al die tijd gewerkt om een beeld te krijgen dat ik niet kan gebruiken.

Nou, geweldig.

Geen zorgen, hiervoor zijn meerdere oplossingen. Ik leg ze zo uit.

Maar eerst bekijken we andere use-cases, want ook daar lopen we tegen hetzelfde probleem aan.

Generatief vullen

Als we teruggaan naar de homepage van Adobe Firefly en de optie Generative fill kiezen, kunnen we een eigen beeld uploaden (wat bij de beeldgeneratie niet kon) of werken met een van de voorgestelde beelden:

Use-case 1: elementen uit een beeld verwijderen

Ik upload mijn duiker en selecteer de remove-tool:

Nu ga ik met het penseel uit de onderste werkbalk in de modus "Add" de elementen verwijderen die ik niet in het beeld wil:

Het kan zijn dat ik deze stap een paar keer moet herhalen:

Tot we uiteindelijk iets fatsoenlijks en bruikbaars krijgen:

Maak je geen zorgen om de rode vlek op de achtergrond; die laten we zo verdwijnen.

Wie Photoshop beheerst heeft natuurlijk meer mogelijkheden, maar voor wie dat niet doet is deze functie van de tool erg nuttig.

Want hoewel ik in dit geval het watermerk wil verwijderen, kan ik uit een willekeurige vakantiefoto ook ongewenste "figuranten" verwijderen.

Of in een selfie van een groep kan ik heel gemeen doen en net doen alsof die persoon dieiknietzoleukvind er nooit bij was.

Ik laat het daarbij.

Use-case 2: de achtergrond van een beeld veranderen

Goed, nadat ik het watermerk heb verwijderd zoals ik net uitlegde (later volgen meer opties), klik ik op "background" om de achtergrond te verwijderen:

Zo, nu hebben we het beeld zonder achtergrond:

En ik voeg de achtergrond toe die ik wil door de prompt te schrijven. Bijvoorbeeld een onderwaterachtergrond:

Ik zet hem in de jungle:

Of in New York:

Not bad, hè?

Illustraties direct met een achtergrond maken

Nu je deze mogelijkheden kent, wil ik erop wijzen dat het eigenlijk veeeel eenvoudiger zou zijn geweest om de achtergrond rechtstreeks met de beeldgenerator te maken, bijvoorbeeld zoals in deze twee voorbeelden:

De prompt is:

"Diver in a bright blue submarine suit, with a black diving suit covering his face completely, against a dark and terrifying background of the deep sea.".”

In vet zie je hoe ik aangeef dat ik de achtergrond van het beeld wil.

Sneller en makkelijker. Afhankelijk van wat ik nodig heb, kies ik dus voor de lange handmatige methode of de snelle automatische.

Een complexe illustratie of compositie maken

De mogelijkheid om achtergronden te verwijderen of andere aan onze beelden toe te voegen, komt in verschillende situaties goed van pas.

Een daarvan is wanneer je een complexe compositie met verschillende elementen en achtergronden moet maken.

Stel je in ons voorbeeld voor dat ik nog twee duikers rechts of links van de hoofdpersoon wil toevoegen en een reuzeninktvis erachter. Plus de onderwaterachtergrond natuurlijk.

Dan zou ik het volgende moeten doen:

1. Elk element afzonderlijk maken met Firefly, zoals we in de vorige stap zagen.
2. De achtergrond van elk element verwijderen, zoals we hebben gezien.
3. De compositie in Photoshop maken en opslaan.

Om zoiets als dit te krijgen:

Een "illustratie" waarvan elke professionele illustrator meteen zal zien dat er enorm veel ruimte voor verbetering is.

Maar ik heb slechtere videogamecovers gezien.

En het belangrijkste: hij is in minder dan tien minuten gemaakt.

Echt.

Vanaf nul.

Ik vind in elk geval de verhouding resultaat / tijd verbluffend..

Firefly maakt het namelijk mogelijk om twee van de drie stappen – alle elementen voor een professionele illustratie / compositie maken en ze van de achtergrond isoleren – ZEER snel uit te voeren.

Voor het eerst in de geschiedenis is onze creativiteit echt de grens..

Niet onze ontwerp- of retoucheervaardigheden.

Niet de beschikbare tijd.

Onze verbeelding. Zo simpel is het.

Kleurvariaties in vectoren en teksteffecten

Firefly heeft nog twee functies die ik nog niet heb gebruikt.

Een daarvan is het maken van kleurvariaties in vectorillustraties..

Ook hier is het gebruik heel eenvoudig: je uploadt een SVG en schrijft de prompt of gebruikt het optiespaneel:

De andere beschikbare functie is het maken van teksteffecten.

Ik neem aan dat ik die ooit voor een banner of een ander formaat zal gebruiken, maar voorlopig kan ik alleen zeggen dat je om hem te gebruiken alleen het woord of de tekst hoeft te schrijven en het effect hoeft te selecteren.:

Daarmee sluiten we de use-cases van Firefly af, maar beloofd is beloofd…

Het Firefly-watermerk verwijderen

Voor we beginnen vind ik het nodig te herhalen dat beelden die met Adobe Firefly op de website worden gegenereerd NIET gelicentieerd zijn voor commercieel gebruik.

Kunnen we het toch doen? Ja, maar op eigen risico.

Daarnaast moet je weten dat telkens wanneer we een beeld van het platform downloaden , dit watermerk linksonder wordt toegevoegd.

Of we nu een beeld vanaf nul maken of generatief vullen gebruiken om achtergronden te verwijderen of te veranderen.

Maar er zijn manieren om het te omzeilen als we de beelden commercieel willen gebruiken.

Laten we beginnen met de eenvoudigste.

#1. Door het beeld bij te snijden

Voor de hand liggend, toch?

Ik download het volledige beeld en snijd het daarna bij in Photoshop of een vergelijkbare tool, zodat het watermerk buiten beeld valt:

Als je het je herinnert, bepaalden we in stap 3 van de tutorial het formaat. Toen zei ik dat er bij de keuze twee factoren waren om rekening mee te houden:

• Het formaat dat we voor het beeld wilden.
• Het watermerk.

Als we bijvoorbeeld een vierkant beeld voor een Instagram-post willen, kunnen we een liggend formaat ("landscape" of "widescreen") kiezen en het daarna bijsnijden zoals in het beeld hierboven.

Het watermerk valt dan buiten de uiteindelijke compositie.

De uitsnede vergroten

Als het beeld na het bijsnijden te klein is voor wat we nodig hebben, kunnen we altijd Waifu gebruiken om het te vergroten.

Ik gebruik deze tool voortdurend voor dit soort werk, omdat hij een beeld verdubbelt (of verviervoudigt) met veel minder kwaliteitsverlies dan de huidige concurrentie.

En bovendien is hij gratis en heel eenvoudig te gebruiken:

1. Het beeld selecteren.
2. De instellingen kiezen.
3. Downloaden.

#2. Door het beeld te bewerken

Misschien de meest voor de hand liggende methode en de eerste waar je aan denkt.

Maar er zijn natuurlijk een paar verschillende benaderingen binnen deze techniek.

Met Firefly zelf

Zoals we in de tutorial over generatief vullen deden met de arm van de duiker.

De eenvoudigste methode, al werkt die niet altijd.

Met Photoshop (of vergelijkbaar)

Als je kunt bewerken, begin je misschien meteen hier:

Kopiëren, plakken, kloonstempel, inhoud behouden vullen, enz.

Naast ons gebruikelijke arsenaal voegen de abonnementsversies van Photoshop Firefly’s generatieve vulling toe, waardoor je de twee methoden waar we het over hebben in één tool hebt.

Ideaal.

#3. Een volledige of gedeeltelijke screenshot maken

Laten we naar fantasierijkere maar heel eenvoudige methoden gaan.

Als je het beeld in Firefly hebt gemaakt, kun je in plaats van op downloaden te klikken en het watermerk te laten toevoegen iets anders doen: een volledige of gedeeltelijke screenshot van het browservenster maken.

Zodra je deze screenshot hebt, kun je de uitsnede in Photoshop of een vergelijkbare tool verfijnen, met twee voordelen:

• Het beeld dat je zo krijgt heeft op zichzelf al een hogere resolutie dan het gedownloade beeld.
• Daarnaast kun je het volledige beeld gebruiken, zonder watermerk in de hoek.

Dit is altijd nuttig, maar nog meer als je een 4k-monitor hebt, want de resolutie van de screenshot is enorm en zelfs bruikbaar voor ontwerpen voor drukwerk (die een hogere resolutie vereisen dan digitale formaten).

#4. Element-inspector

Een methode die lijkt op de vorige, maar iets minder handmatig en wat meer techie..

Als het gewenste beeld eenmaal is gegenereerd, maken we niet zoals eerder een screenshot, maar zoeken we het originele beeldbestand in de code zodat we het op onze pc kunnen opslaan.

Eerst openen we de inspector door met rechts te klikken in het gearceerde gebied naast het beeld, want als ik rechtstreeks op het beeld klik, opent hij niet (Adobe wil het ons begrijpelijkerwijs nét iets moeilijker maken):

Daarna zoeken we het bronbestand van het beeld. Je moet hiervoor een beetje HTML kennen, maar het is niet moeilijk:

Ik klik met rechts op het pad van het beeld in de HTML en kies "openen in nieuw tabblad":

Daardoor opent het beeld in een nieuw browsertabblad, met een meer dan behoorlijke resolutie en zonder watermerk. Vervolgens kan ik het normaal op mijn computer opslaan:

Dit is de laatste techniek die ik ken om beelden uit Adobe Firefly zonder watermerk te downloaden.

Zoals je ziet zijn ze verschillend en ik gebruik de ene of de andere afhankelijk van de situatie. Raak vertrouwd met allemaal en het watermerk zal nooit meer een probleem voor je zijn.

Nu we de tool grondig hebben bekeken, kunnen we al wat conclusies trekken. Maar eerst…

Voordelen van Adobe Firefly

Ik zie bij deze tool in wezen drie voordelen ten opzichte van zijn concurrenten.

Om te beginnen is een van de belangrijkste dat hij gratis is.

En zonder limiet op genereren of downloaden. Tenminste, voorlopig.

Midjourney is niet overdreven duur – eerder het tegenovergestelde –, maar als je slechts af en toe een beeld wilt, bespaar je toch iets.

Het tweede voordeel is voor mij dat hij krachtig en tegelijk eenvoudig is.

Met andere woorden: goede resultaten behalen is relatief makkelijk en het zijpaneel helpt daarbij.

Andere tools zoals Stable Diffusion zijn weliswaar heel krachtig – vooral in hun nieuwste versies –, maar hebben een steilere leercurve. Met Firefly krijg je daarentegen vanaf het begin zeer goede resultaten met eenvoudige prompts en het zijpaneel.

Het laatste duidelijke voordeel is dat het dankzij dit zijpaneel mogelijk is om een eigen stijl voor beelden te creëren. Als ik steeds dezelfde stijlen en effecten gebruik – een combinatie die beelden met een bepaalde persoonlijkheid oplevert – kan ik de samenhang in een heel project behouden (beelden voor een website, illustraties of communicatiemateriaal voor een klant).

Nadelen van Adobe Firefly

Maar natuurlijk kon hier niet alles positief zijn.

Ook deze AI heeft zijn zwakke punten. En die zijn bepaald niet klein:

Om te beginnen staat het webplatform geen commercieel gebruik toe van de gegenereerde beelden.

Je kunt het natuurlijk wel doen, maar je loopt het risico op een boete. Aan jou de keuze.

In dat opzicht komt de tweede complicatie door het watermerk dat aan elke creatie wordt toegevoegd.

Ik heb uitgelegd welke manieren ik ken om dit probleem te omzeilen, maar het blijft vervelend.

Het volgende nadeel vind ik dat Firefly in veel gevallen nog steeds moeite heeft met het genereren van gezichten en handen, waardoor beelden op zich goed zijn maar juist die onderdelen vervormd raken. Als dat gebeurt, moet je de prompt aanpassen en hopen op het beste.

In dit opzicht denk ik dat Firefly, hoewel het krachtig is, nog steeds een klein stapje achterloopt op het nieuwste Midjourney-model, dat niet alleen deze vervormingen van vingers en ogen beter oplost, maar ook beelden met nét iets meer kwaliteit genereert.

Als we Firefly met die tool vergelijken, zien we inderdaad dat bepaalde functies ontbreken, want het kan niet:

• Het genereren van webinterfaces.
• Het genereren van logo’s die er fatsoenlijk uitzien.
• Het kopiëren van de stijl van bekende kunstenaars .
• Een extern beeld als referentie gebruiken.

Dit zijn allemaal heel nuttige functies die Midjourney wel heeft en Firefly voorlopig niet.

Tot slot nog een paar kleinere details:

Ik heb gemerkt dat bepaalde complexe concepten zoals "monocle" door Firefly niet binnen een compositie worden herkend. En dat ligt niet aan de complexiteit van de prompt: vervang je dat woord door "bril", dan herkent en gebruikt Firefly het zonder problemen.

Ik ben meerdere van dit soort gevallen tegengekomen en alternatieven zoeken is lastig of soms gewoon onmogelijk.

Deze begrippen kan Firefly afzonderlijk geschreven overigens wel gebruiken, dus ik neem aan dat het slechts een kwestie van tijd is voordat ze ook in context worden herkend.

Ten slotte kun je toevoegen dat je voorlopig alleen prompts in het Engels kunt gebruiken.

Dat is niet iets wat alleen bij Firefly gebeurt, maar het gebeurt wel. Als we complexe prompts willen gebruiken en niet zo goed uit de voeten kunnen met de taal van Shakespeare, moeten we externe vertalers gebruiken.

Slotconclusies

Na de basisfuncties van de tool en de voor- en nadelen te hebben uitgelegd, is mijn conclusie dat we, als de nadelen geen probleem zijn – en dat zullen ze voor velen niet zijn –, met een uitstekende tool te maken hebben.

Een van die tools die de spelregels veranderen.

Maar natuurlijk moeten we wachten tot Adobe zijn commerciële versie voor particulieren uitbrengt – er is al een optie voor bedrijven – om de prijs te zien en te beoordelen of het echt de moeite waard is, of dat de betaalde concurrentie (Midjourney) of het gratis alternatief (Stable Diffusion) aantrekkelijker zijn.

Voorlopig raad ik je aan ermee te gaan spelen, want je zou weleens zeer aangenaam verrast kunnen worden.