Adobe Firefly: veiledning

Med fremveksten av Dall-E, , Midjourney og Stable Diffusion så Adobe – giganten innen digital innholdsproduksjon – faresignalene: posisjonen deres kunne bli alvorlig truet.

For hvis vi med noen tekstlinjer kunne lage hvilken som helst type bilde (fotorealistisk, illustrasjon, grensesnitt for digitale produkter…), hvorfor skulle vi da bruke verktøypakken deres?

Derfor begynte selskapet å jobbe med sine egne AI-baserte verktøy for innholdsgenerering og lanserte først to (flere er på vei):

• Generativ fylling i Photoshop.
• Adobe Firefly: bildegeneratoren fra tekst (og litt til).

I denne artikkelen skal jeg snakke om den sistnevnte.

Om hvordan den har blitt et ekstremt nyttig verktøy i det daglige arbeidet mitt.

Jeg skal forklare hvordan jeg går løs på enkelte ganske vanlige bruksområder.

Så hvis du også gjør lignende oppgaver, kan du legge den til i arsenalet ditt og vurdere den opp mot andre muligheter.

Så la oss begynne fra starten.

Hva er Adobe Firefly?

Firefly er navnet Adobe har gitt sin generative kunstige intelligens, som lar oss ta utgangspunkt i en tekst (prompt) for å lage bilder fra bunnen av, retusjere eller endre eksisterende bilder, lage videoer og enkelt redigere dem eller lage vektorer fra skisser.

Som du ser er den ganske komplett og går lenger enn det alternativer som Stable Diffusion eller Midjourney tilbyr i dag, for å nevne de to mest populære.

En annen fordel med at den kommer fra Adobe, er at den er integrert i redigeringsverktøyene deres, som Photoshop eller Illustrator..

For dem som ikke bruker disse verktøyene, finnes det også en egen nettplattform, slik at hvem som helst kan bruke den uavhengig.

Og det er denne plattformen jeg skal forklare.

Bruksområder for Adobe Firefly

Først av alt må du gå inn i verktøyet og opprette en gratis konto hvis du ikke allerede har en.

Når du er inne, kan du se at verktøyet per i dag har seks bruksområder. Fire fungerer allerede, og to kommer snart:

La oss gå gjennom dem ett for ett og se hva de kan bidra med.

Text to image

Det første er kanskje det mest kjente og vanligste.

Det er den direkte konkurrenten til Midjourney eller Dall-E: en bildegenerator basert på prompts.

Det vil si at vi skriver en tekst -på engelsk- og verktøyet gjør den om til flere bilder, slik at vi kan velge det vi liker eller fortsette å endre teksten til vi får det vi vil ha.

Slik bruker du funksjonen

Når vi går inn i denne funksjonen, åpnes en karusell med uendelig scrolling av bilder som er generert med verktøyet.

Hvis vi holder musepekeren over et av dem, vises prompten som genererte det:

Selv om vi kan klikke på hvilket som helst av dem for å åpne generatoren, er det smartest å bruke noen sekunder på å finne et bilde som har en stil eller tone som ligner det vi er ute etter – selv om selve bildet viser et annet motiv –, fordi det sparer oss for tid i redigeringen.

Jeg forklarer med et eksempel:

La oss si at jeg trenger en dykker som hovedmotiv i en illustrasjon av havbunnen.

Steg 1: valg av startbilde

Jeg ser og finner dette:

For illustrasjonen jeg har i hodet, passer følgende:

• Frontvinkelen.
• Stilen med fantastisk realisme i bildet.
• Lyssettingen og fargetonene.

Så jeg klikker på det, og generatoren åpnes. Der kan jeg se prompten som ble brukt og endre den, sammen med stilene i bildet:

Steg 2: justere prompten for å få et grunnbilde

Det første jeg kan gjøre, er å endre prompten slik at den passer ideen min.

Hvis jeg ikke helt vet hvordan jeg skal forklare på engelsk hva jeg vil ha, kan jeg bruke en nettoversetter som DeepL til det:

Deretter limer jeg den inn i Firefly og genererer resultatene:

Pshhhhh…

Ja, det er det vi ba om, men ærlig talt er det langt unna det jeg var ute etter. Så da må vi finjustere bildegenereringen litt.

Jeg kan hovedsakelig gjøre to ting:

#1. Bruke et referansebilde

Fra siden med de halvdårlige resultatene går jeg tilbake med nettleserens tilbakepil til jeg kommer til den opprinnelige romkoalaen min.

På dette punktet, velger jeg bildet jeg liker best og bruker det som modell via ikonet med de tre prikkene som vises øverst til høyre når jeg holder musepekeren over bildet:

Til tross for deformasjonen i ansiktet begynner resultatene å bli (litt) bedre for formålet mitt:

Noen interessante ting her:

• Det mest åpenbare er at Firefly har brukt formen på koalaens ører til å utforme luftslangene.
• Bildene er mer realistiske enn fantastiske fordi jeg har angitt at jeg vil ha innhold av typen "foto". Dette punktet skal vi se nærmere på nå.
• Jeg velger en nøytral bakgrunn for senere å kunne vise deg et komplett bruksområde, men hvis jeg bare trengte illustrasjonen av dykkeren, ville jeg laget bakgrunnen her med en gang.
• Vi kan velge hvor stor vekt det opprinnelige referansebildet skal ha med glidebryteren som vises når vi klikker på bildet. Generelt gir 50% best resultater:

Siden jeg fortsatt ikke er helt fornøyd med resultatene, skal jeg forklare den andre metoden for å forbedre dem.

#2. Endre prompten

Det er den andre måten å forbedre de første resultatene på. Og den er mye enklere.

Hvis jeg endrer prompten over til: "Cyberpunk diver in bright blue submarine suit, face covered, on a neutral background", blir resultatene betydelig bedre for formålet mitt:

Nå blir det noe annet.

De to bildene til høyre, særlig det øverste, kunne fungert for meg og brukes som referanse..

Og det er faktisk akkurat det jeg skal gjøre. Det blir utgangspunktet mitt..

Steg 3: valg av format

Viktig av to grunner:

1. Det må passe til illustrasjonen min.
2. Når vi eksporterer, legger Firefly til et vannmerke på bildet som vil ødelegge komposisjonen (hvis vi ikke har tatt høyde for det på forhånd).

Senere forklarer jeg hvordan du kan håndtere det andre problemet, men foreløpig holder vi oss til det første.

I panelet til høyre har vi alle innholdsalternativene.

Det første er å velge format (ratio):

Vi velger det som passer best til komposisjonen vi har i tankene.

Det kan velges eller endres senere, men vær klar over at det genererte bildet vil bli endret (i eksempelet vårt, dykkeren). Det vil si at ikke bare formatet endres: når bildet genereres på nytt, blir det ikke identisk og vil endre seg mer eller mindre, så jeg anbefaler å velge det nå.

Jeg beholder kvadratformatet, som er veldig allsidig.

Steg 4: velge bildetype

Rett under formatet begynner vi å angi tonen vi vil at bildet skal ha.

Som standard tolker Firefly, ut fra prompten, hvilke assosiasjoner bildet skal ha: "cyberpunk" i eksempelet mitt styrer for eksempel resultatet.

Først bestemmer vi om vi trenger:

#1. Et foto

Som du ser endrer det ikke originalstilen ("None") særlig mye.

#2. En "grafikk"

Det er illustrasjons- eller "digital" designversjonen av det forrige bildet.

#3. En kunstnerisk stil.

I motsetning til den forrige har denne illustrasjonen et mye mer malerisk eller kunstnerisk preg. Mer "analogt", om du vil.

Som du ser, begynner vi å snevre inn mye mer hvilken type bilde vi vil ha. Men vent, det finnes mye mer.

Steg 5: definere stilen

I mitt tilfelle skal jeg bruke fotografi, fordi jeg som nevnt i starten er ute etter en stil med fantastisk realisme, så jeg vil at startbildet, selve basen, skal være realistisk.

Nå er det på tide å legge til den fantastiske tonen, så la oss gjøre litt magi.

Det første du gjør er å klikke på knappen "All" for å se alle mulighetene, og de er det mange av:

Du har ulike "bevegelser", "temaer", "teknikker", "effekter", "materialer" og "konsepter" å leke med.

Og du kan kombinere dem med hverandre.

Så gjør det.

Prøv.

Eksperimenter.

Ha det gøy.

Et råd er likevel å legge til de ulike valgene ett om gangen, slik at du kan se hvilken effekt hvert av dem har på bildet.

Det er måten å beholde en viss kontroll på, for hvis du bruker flere samtidig, vet du ikke hvilket som gir bildet effekten du liker:

Det er likevel viktig å vite at stilene du gir bildet blir VELDIG sterkt påvirket hvis du bruker et referansebilde.

Dette er resultatet med samme prompt og de samme effektene uten bruk av referansebilde:

Steg 6: farge og tone, den siste finpussen

Vi har nesten hovedpersonen vår klar, men vi vil finpusse bildet enda litt mer.

Til det har vi den siste delen av panelet, der vi kan leke med farger, lys og komposisjon (hvor bildet er tatt fra, type objektiv osv.):

Tips:

Du må vite at disse detaljene, særlig komposisjonen, vil ha større innvirkning på bildet vårt:

• Hvis vi har lagt til en ekte bakgrunn, i motsetning til i dette eksempelet der jeg er ute etter en nøytral bakgrunn.
• Og fremfor alt hvis vi ikke bruker et referansebilde, fordi det fjerner mange av disse nyansene.

Steg 7: laste ned bildet

Når jeg har bildet jeg vil ha, trenger jeg bare å laste det ned herfra:

Men til min overraskelse ser jeg dette når jeg åpner det:

Ohhhh.

All denne tiden for å få et bilde jeg ikke kan bruke.

Jøss, så bra.

Slapp av, dette har flere løsninger. Om et øyeblikk forklarer jeg hvilke.

Men først skal vi se på andre bruksområder, for der møter vi det samme problemet.

Generative fill

Hvis vi går tilbake til startsiden til Adobe Firefly og velger alternativet Generative fill , kan vi laste opp et eget bilde (noe som ikke var mulig ved bildegenerering) eller jobbe med et av bildene som foreslås:

Bruksområde 1: fjerne elementer fra et bilde

Jeg laster opp dykkeren min og velger verktøyet remove:

Nå bruker jeg penselen i verktøylinjen nederst i modusen "Add" og fjerner elementene jeg ikke vil ha i bildet:

Det kan hende jeg må gjenta dette et par ganger:

Til vi til slutt får noe greit og brukbart:

Ikke bekymre deg for den røde flekken i bakgrunnen, den fjerner vi etterpå.

Det er klart at den som behersker Photoshop får enda flere muligheter, men for dem som ikke gjør det, vil denne funksjonen være veldig nyttig.

For selv om det jeg vil fjerne i dette tilfellet er vannmerket, kan jeg på et hvilket som helst bilde fra den siste ferien fjerne uønskede "statister".

Eller på en selfie med en gruppe kan jeg være skikkelig slem og late som om den personen somjegikkelikersegodt aldri var der.

Der har du den.

Bruksområde 2: endre bakgrunnen på et bilde

Vel, når vannmerket er fjernet slik jeg nettopp forklarte (flere alternativer senere), klikker jeg på "background" for å fjerne bakgrunnen:

Sånn, nå har vi bildet uten bakgrunn:

Så legger jeg til den bakgrunnen jeg vil ha ved å skrive en prompt. For eksempel en undervannsbakgrunn:

Jeg plasserer ham i jungelen:

Eller i New York:

Not bad, ikke sant?

Lage illustrasjoner med bakgrunn direkte

Når du kjenner disse mulighetene, vil jeg nevne at det egentlig hadde vært myyyyye enklere å lage bakgrunnen direkte med bildegeneratoren, for eksempel som i disse to eksemplene:

Prompten er:

"Diver in a bright blue submarine suit, with a black diving suit covering his face completely, against a dark and terrifying background of the deep sea.".»

I fet skrift ser du hvordan jeg forteller at jeg vil ha bakgrunnen i bildet.

Raskere og enklere, så avhengig av hva jeg trenger, velger jeg den lange og manuelle metoden eller den raske og automatiske.

Lage en illustrasjon eller kompleks komposisjon

Muligheten til å fjerne bakgrunner eller legge andre til bildene våre er nyttig i ulike situasjoner.

Én av dem er hvis du trenger å lage en kompleks komposisjon med forskjellige elementer og bakgrunner.

I eksempelet vårt kan du tenke deg at jeg vil legge til to dykkere til til høyre eller venstre for hovedpersonen og en kjempeblekksprut bak. I tillegg til havbakgrunnen, selvfølgelig.

Da måtte jeg:

1. Lage hvert element separat med Firefly, som vi så i forrige steg.
2. Fjerne bakgrunnen fra hvert av dem, som vi har sett.
3. Lage komposisjonen i Photoshop og lagre.

For å få noe som dette:

En "illustrasjon" der enhver profesjonell illustratør tydelig vil se et enormt forbedringspotensial.

Men jeg har sett dårligere omslag til videospill.

Og viktigst av alt: den er laget på mindre enn ti minutter.

På ordentlig.

Fra bunnen av.

I hvert fall synes jeg det er utrolig med forholdet resultat / tid er utrolig..

Og Firefly gjør det mulig å utføre to av de tre stegene -lage alle elementene til en profesjonell illustrasjon / komposisjon og isolere dem fra bakgrunnen- VELDIG raskt.

For første gang i historien er kreativiteten vår faktisk grensen..

Ikke ferdighetene våre innen design eller retusj.

Ikke tiden vi har til rådighet.

Fantasien vår. Rett og slett.

Fargevariasjoner i vektorer og teksteffekter

Firefly har to andre funksjoner som jeg ennå ikke har brukt.

Den ene er å lage fargevariasjoner i vektorillustrasjoner..

Bruken er igjen veldig enkel: du laster opp en SVG og skriver prompten eller bruker alternativpanelet:

Den andre tilgjengelige funksjonen er å lage teksteffekter.

Jeg regner med at jeg på et tidspunkt bruker den til et banner eller et annet format, men foreløpig kan jeg bare si at for å bruke den skrive ordet eller teksten og velge effekten.:

Med dette avslutter vi bruksområdene for Firefly, men et løfte er et løfte…

Slik fjerner du Firefly-vannmerket

Før vi begynner, mener jeg det er nødvendig å gjenta at bilder som genereres med Adobe Firefly på nettstedet deres IKKE har lisens for kommersiell bruk.

Kan vi gjøre det likevel? Ja, men på eget ansvar.

Vel, i tillegg til dette må du vite at hver gang vi laster ned et bilde fra plattformen, blir dette vannmerket lagt til nederst i venstre hjørne.

Det gjelder enten vi lager et bilde fra bunnen av eller bruker generativ fylling til å fjerne eller endre bakgrunner.

Men det finnes måter å unngå det på hvis vi vil bruke bildene kommersielt.

La oss begynne med den enkleste.

#1. Ved å beskjære bildet

Åpenbart, ikke sant?

Jeg laster ned hele bildet og beskjærer det deretter i Photoshop eller lignende slik at vannmerket havner utenfor:

Hvis du husker, definerte vi formatet i steg 3 av veiledningen. Da sa jeg at det var to faktorer å ta hensyn til når vi valgte det:

• Formatet vi ønsket for bildet.
• Vannmerket.

Hvis vi for eksempel vil ha et kvadratisk bilde til et Instagram-innlegg, kan vi velge et liggende format ("landscape" eller "widescreen") og deretter beskjære som på bildet over.

Vannmerket blir liggende utenfor den endelige komposisjonen.

Forstørre det beskårne bildet

Hvis bildet etter beskjæringen er for lite til det vi trenger, kan vi alltid bruke Waifu for å forstørre det.

Det er et verktøy jeg bruker hele tiden til slike ting, fordi det forstørrer et bilde til det dobbelte (eller firedobbelte) med langt mindre kvalitetstap enn dagens konkurrenter.

I tillegg er det gratis og veldig enkelt å bruke:

1. Velg bildet.
2. Velg innstillingene.
3. Last ned.

#2. Ved å redigere bildet

Kanskje den mest åpenbare måten og den første vi kommer på.

Men det finnes selvsagt et par ulike tilnærminger med denne teknikken.

Med Firefly selv

Som vi gjorde i veiledningen om generativ fylling med armen til dykkeren.

Den enkleste måten, selv om den ikke alltid fungerer.

Med Photoshop (eller lignende)

Hvis du kan redigere, begynner du kanskje direkte her:

Kopier, lim inn, klonestempel, innholdsbasert fylling og så videre.

I tillegg til det vanlige arsenalet vårt legger abonnementsversjonene av Photoshop Fireflys generative fylling, slik at vi får de to metodene vi snakker om i ett og samme verktøy.

Ideelt.

#3. Ta et helt eller delvis skjermbilde

La oss gå videre til mer kreative, men veldig enkle metoder.

Når du har laget bildet i Firefly, kan du gjøre noe annet i stedet for å trykke på last ned og få vannmerket: ta et helt eller delvis skjermbilde av nettleservinduet.

Når du har skjermbildet, kan du finjustere beskjæringen i Photoshop eller lignende, med to fordeler:

• Bildet du får på denne måten har allerede høyere oppløsning enn det nedlastede bildet.
• I tillegg kan du bruke hele bildet uten vannmerke i hjørnet.

Dette er alltid nyttig, men enda mer hvis du har en 4k-skjerm, siden skjermbildet da får enorm oppløsning og til og med kan brukes til trykksaker (som krever høyere oppløsning enn digitale formater).

#4. Elementinspektøren

En metode som ligner den forrige, men er litt mindre manuell og mer techie..

Den går ut på at når bildet vi vil ha er generert, leter vi opp originalfilen til bildet i koden i stedet for å ta et skjermbilde, slik at vi kan lagre den på PC-en.

Først åpner jeg inspektøren ved å høyreklikke i det skyggelagte området ved siden av bildet, fordi den ikke åpnes hvis jeg klikker direkte på selve bildet (Adobe vil naturligvis gjøre det litt vanskeligere for oss):

Deretter må vi finne kildefilen til bildet. Du må kunne litt HTML for dette, men det er ikke vanskelig:

Jeg høyreklikker på bildets bane i HTML og velger "åpne i ny fane":

Da åpnes bildet i en ny nettleserfane med mer enn god nok oppløsning og uten vannmerke. Så kan jeg lagre det på maskinen på vanlig måte:

Dette er den siste teknikken jeg kjenner til for å laste ned bilder fra Adobe Firefly uten vannmerke.

Som du ser er de forskjellige, og jeg bruker den ene eller den andre avhengig av situasjonen. Bli vant til alle sammen, så vil vannmerket aldri være et problem for deg igjen.

Etter denne grundige gjennomgangen av verktøyet kan vi begynne å trekke noen konklusjoner. Men først…

Fordeler med å bruke Adobe Firefly

Jeg ser først og fremst tre fordeler med dette verktøyet sammenlignet med konkurrentene.

Til å begynne med er en av de viktigste at det er gratis.

Og uten begrensning på generering eller nedlasting. I hvert fall foreløpig.

Det er ikke slik at Midjourney er spesielt dyrt -snarere tvert imot- men hvis du bare trenger bilder av og til, sparer du i det minste litt.

Den andre fordelen jeg ser, er at det er kraftig og samtidig enkelt.

Det vil si at det er relativt lett å få gode resultater, og sidepanelet hjelper.

Andre verktøy som Stable Diffusion er riktignok svært kraftige – særlig i de nyeste versjonene – men har en brattere læringskurve. I Firefly får du derimot svært gode resultater fra første stund med enkle prompts og sidepanelet.

Den siste klare fordelen jeg ser, er at det takket være dette sidepanelet er mulig å lage en egen stil for bildene. Hvis jeg alltid bruker de samme stilene og effektene -en kombinasjon som gir bilder en viss personlighet- kan jeg holde uttrykket konsistent gjennom et helt prosjekt (bilder til et nettsted, illustrasjoner eller kommunikasjonsmateriell for en kunde).

Ulemper med Adobe Firefly

Men alt kunne selvsagt ikke være positivt her.

Denne AI-en har også sine svake sider. Og de er ikke akkurat små:

Til å begynne med tillater nettplattformen ikke kommersiell bruk av de genererte bildene.

Du kan gjøre det, selvfølgelig, men da risikerer du bot. Så det er opp til deg.

I denne sammenhengen kommer den andre komplikasjonen fra vannmerket som legges til hver generering.

Jeg har forklart måtene jeg kjenner til for å omgå problemet, men det er fortsatt irriterende.

Det neste negative punktet jeg ser, er at Firefly i mange tilfeller fortsatt ikke håndterer generering av ansikter og hender særlig godt. Bildene kan ellers være riktige, men disse delene blir deformerte. Hvis det skjer, må du endre prompten og håpe på det beste.

Selv om den er kraftig, mener jeg derfor at den fortsatt ligger et lite steg bak den nyeste modellen av Midjourney, som i tillegg til å redusere deformasjoner av fingre og øyne også genererer bilder med litt høyere kvalitet.

Hvis vi sammenligner den med det verktøyet, ser vi faktisk at Firefly mangler enkelte funksjoner, siden den ikke kan:

• Generere nettgrensesnitt.
• Generere logoer som ser ordentlige ut.
• Kopiere stilen til kjente kunstnere .
• Bruke et eksternt bilde som referanse.

Dette er alle svært nyttige funksjoner som Midjourney har, og som Firefly foreløpig mangler.

Til slutt et par mindre detaljer:

Jeg har sett at enkelte komplekse konsepter som "monokkel" ikke blir gjenkjent av Firefly i en komposisjon. Det skyldes ikke at prompten er komplisert: hvis du bytter ut ordet med "briller", kjenner den det igjen og bruker det uten problemer.

Jeg har støtt på flere slike tilfeller, og det er upraktisk å lete etter alternativer, eller så finnes det rett og slett ingen.

Når det er sagt, klarer verktøyet å bruke disse konseptene når de skrives separat, så jeg antar at det bare er et spørsmål om tid før det kjenner dem igjen.

Til slutt kan det legges til at du foreløpig bare kan bruke prompts på engelsk.

Det er ikke noe som bare gjelder Firefly, men det skjer, og hvis vi vil bruke komplekse prompts og ikke er særlig gode i Shakespeares språk, må vi ty til eksterne oversettere.

Avsluttende konklusjoner

Når de grunnleggende bruksområdene for verktøyet, med fordeler og ulemper, er forklart, er konklusjonen min at hvis ulempene ikke er et problem -og det vil de ikke være for mange- har vi et fantastisk verktøy.

Et av dem som endrer spillereglene.

Men vi må selvfølgelig vente til Adobe lanserer den kommersielle versjonen for privatpersoner -det finnes allerede et alternativ for bedrifter- for å se prisen og vurdere om det virkelig er verdt det, eller om den betalte konkurrenten (Midjourney) eller den gratis (Stable Diffusion) er et bedre valg.

Foreløpig anbefaler jeg at du begynner å leke med den, for du kan faktisk bli svært positivt overrasket.