Adobe Firefly: handledning

I och med framväxten av Dall-E, , Midjourney och Stable Diffusion såg Adobe – jätten inom skapande av digitalt innehåll – faran: företagets position kunde hotas på allvar.

För om vi med några rader text kunde skapa vilken typ av bild som helst (fotorealistisk, illustration, gränssnitt för digitala produkter…), varför skulle vi då använda deras verktygssvit?

Därför började företaget arbeta med sina egna AI-baserade verktyg för innehållsgenerering och lanserade till en början två (flera är på väg):

• Generativ fyllning i Photoshop.
• Adobe Firefly: bildgeneratorn från text (och lite annat).

I den här artikeln ska jag prata om den sistnämnda.

Om hur den har blivit ett extremt användbart verktyg i mitt dagliga arbete.

Jag ska förklara hur jag tar mig an vissa ganska vanliga användningsfall.

Så om du också gör liknande saker kan du lägga till den i din arsenal och bedöma den mot andra alternativ.

Så, vi börjar från början.

Vad är Adobe Firefly?

Firefly är namnet Adobe har gett sin generativa artificiella intelligens, som låter oss utgå från en text (prompt) för att skapa bilder från grunden, retuschera eller ändra befintliga bilder, skapa videor och enkelt redigera dem eller skapa vektorer från skisser.

Som du ser är den ganska komplett och går längre än vad alternativ som Stable Diffusion eller Midjourney erbjuder i dag, för att nämna de två populäraste.

Dessutom är fördelen med att den kommer från Adobe att den är integrerad i företagets redigeringsverktyg, som Photoshop eller Illustrator..

Men för dem som inte använder de verktygen finns också en egen webbplattform, så att vem som helst kan använda den fristående.

Och det är den plattformen jag ska förklara.

Användningsområden för Adobe Firefly

Innan något annat är det första du ska göra att gå in i verktyget och skapa ett gratis konto om du inte redan har ett.

När du väl är inne kan du se att verktyget, i skrivande stund, har sex användningsområden. Fyra fungerar redan och två kommer snart att göra det:

Vi går igenom dem en och en och ser vad de kan ge oss.

Text to image

Det första är kanske det mest kända och vanligaste.

Det är den direkta konkurrenten till Midjourney eller Dall-E: en bildgenerator som använder prompts.

Det vill säga, vi skriver en text -på engelska- och verktyget omvandlar den till flera bilder, så att vi kan välja den vi gillar eller fortsätta ändra texten tills vi får det vi vill ha.

Så använder du funktionen

När vi går in i den här funktionen öppnas en karusell med oändlig scroll av bilder som skapats med verktyget.

Om vi håller muspekaren över någon av dem visas prompten som skapade den:

Även om vi kan klicka på vilken som helst för att öppna generatorn är det smartast att lägga några sekunder på att hitta en bild som har en stil eller ton som liknar det vi söker – även om själva bilden visar ett annat motiv –, eftersom det sparar tid i redigeringen.

Jag förklarar med ett exempel:

Anta att jag behöver en dykare som huvudmotiv i en illustration av havsbotten.

Steg 1: välj startbild

Jag tittar och ser det här:

För illustrationen jag har i huvudet passar följande:

• Frontvyn.
• Bildens stil av fantastisk realism .
• Ljussättningen och färgtonerna.

Så jag klickar på den och generatorn öppnas, där jag kan se prompten som användes och ändra den tillsammans med bildens stilar:

Steg 2: justera prompten för att få en grundbild

Det första jag kan göra är att ändra prompten så att den passar min idé.

Om jag inte riktigt vet hur jag ska förklara på engelska vad jag vill ha kan jag använda en onlineöversättare som DeepL för det:

Nästa steg är att klistra in den i Firefly och generera resultaten:

Pshhhhh…

Ja, det är vad vi bad om, men ärligt talat ligger det långt från det jag var ute efter. Så nu får vi finjustera bildgenereringen lite.

Jag kan i huvudsak göra två saker:

#1. Använda en referensbild

Från sidan med de halvdana resultaten går jag tillbaka med webbläsarens bakåtpil tills jag kommer till min ursprungliga rymdkoala.

I det här läget, väljer jag den bild jag gillar bäst och använder den som modell via ikonen med de tre prickarna som visas uppe till höger när jag håller musen över bilden:

Trots deformationen i ansiktet börjar resultaten bli (något) bättre för mitt syfte:

Några intressanta saker här:

• Det mest uppenbara är att Firefly har använt formen på koalans öron för att utforma luftslangarna.
• Bilderna är mer realistiska än fantastiska eftersom jag har angett att jag vill ha innehåll av typen "foto". Vi återkommer till det strax.
• Jag väljer en neutral bakgrund för att senare kunna visa ett komplett användningsfall, men om jag egentligen bara behövde illustrationen av dykaren skulle jag skapa bakgrunden här direkt.
• Vi kan välja hur stor vikt originalets referensbild ska ha med reglaget som visas när vi klickar på bilden. Generellt ger 50% bäst resultat:

Eftersom jag ändå inte är helt nöjd med resultaten ska jag förklara den andra metoden för att förbättra dem.

#2. Ändra prompten

Det är det andra sättet att förbättra de första resultaten. Och dessutom är det mycket enklare.

Om jag byter prompten ovan mot: "Cyberpunk diver in bright blue submarine suit, face covered, on a neutral background", blir resultaten betydligt bättre för mitt syfte:

Nu händer det grejer.

De två bilderna till höger, särskilt den översta, skulle kunna fungera och användas som referens..

Vilket faktiskt är precis vad jag ska göra. Den blir min utgångspunkt..

Steg 3: välj format

Viktigt av två skäl:

1. Det måste passa min illustration.
2. När vi exporterar lägger Firefly till en vattenstämpel på bilden som förstör kompositionen (om vi inte har planerat för det i förväg).

Senare förklarar jag hur man kan hantera det andra problemet, men tills vidare håller vi oss till det första.

I panelen till höger finns alla innehållsalternativ.

Det första är att välja format (ratio):

Vi väljer det som passar bäst för den komposition vi har i åtanke.

Det går att välja eller ändra senare, men tänk på att den genererade bilden kommer att förändras (i vårt exempel, dykaren). Det vill säga, inte bara formatet ändras: när bilden genereras om blir den inte identisk och förändras mer eller mindre, så jag rekommenderar att du väljer det nu.

Jag behåller det kvadratiska formatet, som är väldigt mångsidigt.

Steg 4: välj bildtyp

Precis under formatet börjar vi ange vilken ton vi vill att bilden ska ha.

Som standard tolkar Firefly, utifrån prompten, vilka konnotationer bilden ska ha: "cyberpunk" i mitt exempel styr till exempel resultatet.

Till att börja med bestämmer vi om vi behöver:

#1. Ett foto

Som du ser förändras inte originalstilen ("None") särskilt mycket.

#2. En "grafik"

Det är den illustrerade eller "digitala" designversionen av föregående bild.

#3. En konstnärlig stil.

Till skillnad från den föregående har den här illustrationen en betydligt mer målerisk eller konstnärlig karaktär. Mer "analog", om du föredrar.

Som du ser börjar vi nu ringa in mycket tydligare vilken typ av bild vi vill ha. Men vänta, det finns mycket mer.

Steg 5: definiera stilen

I mitt fall kommer jag att använda fotografi, eftersom jag som sagt från början söker en stil med fantastisk realism. Därför vill jag att startbilden, grunden, ska vara realistisk.

Nu är det dags att lägga till den fantastiska tonen, så nu gör vi lite magi.

Det första är att klicka på knappen "All" för att se alla möjligheter, och de är inte få:

Du har olika "rörelser", "teman", "tekniker", "effekter", "material" och "koncept" att leka med.

Och du kan kombinera dem med varandra.

Så gör det.

Testa.

Experimentera.

Ha kul.

Ett råd är dock att lägga till de olika valen ett i taget, så att du kan se vilken effekt vart och ett har på bilden.

Det är sättet att behålla viss kontroll, för om du lägger till flera samtidigt vet du inte vilket som ger bilden den effekt du gillar:

Det är dock viktigt att veta att de stilar du ger bilden påverkas VÄLDIGT mycket om du använder en referensbild.

Det här är resultatet med samma prompt och samma effekter utan att använda någon referensbild:

Steg 6: färg och ton, sista finliret

Vi har nästan vår huvudperson klar, men vi vill putsa bilden lite till.

För det har vi den sista delen av panelen, där vi kan leka med färger, ljus och komposition (varifrån bilden är tagen, typ av objektiv osv.):

Tips:

Du ska veta att de här detaljerna, särskilt kompositionen, påverkar vår bild mer:

• Om vi har lagt till en riktig bakgrund, till skillnad från i det här exemplet där jag söker en neutral bakgrund.
• Och framför allt om vi inte använder en referensbild, eftersom den tar bort många av de här nyanserna.

Steg 7: ladda ned bilden

När jag väl har den bild jag vill ha behöver jag bara ladda ned den härifrån:

Men till min förvåning ser jag det här när jag öppnar den:

Ohhhh.

All den här tiden för att få fram en bild som jag inte kan använda.

Jaha, vad kul.

Lugn, det finns flera lösningar på det här. Om en liten stund förklarar jag vilka.

Men först ska vi titta på andra användningsfall, eftersom vi stöter på samma problem där också.

Generative fill

Om vi går tillbaka till startsidan för Adobe Firefly och väljer alternativet Generative fill kan vi ladda upp en egen bild (vilket inte gick med bildgenereringen) eller arbeta med någon av bilderna som föreslås:

Användningsfall 1: ta bort objekt från en bild

Jag laddar upp min dykare och väljer verktyget remove:

Nu använder jag penseln i verktygsfältet längst ned i läget "Add" och tar bort de delar jag inte vill ha i bilden:

Jag kan behöva upprepa detta ett par gånger:

Tills vi till slut får något hyfsat och användbart:

Oroa dig inte för den röda fläcken i bakgrunden, den ska vi få bort strax.

Det är uppenbart att den som kan Photoshop får ännu fler möjligheter, men för dem som inte gör det kommer den här funktionen att vara mycket användbar.

För även om det jag vill ta bort i det här fallet är vattenstämpeln kan jag på vilket semesterfoto som helst ta bort oönskade "statister".

Eller i någon selfie med en grupp kan jag vara riktigt elak och låtsas att den där personen somjagintegillarsåvärstmycket aldrig var där.

Den tanken får du göra vad du vill med.

Användningsfall 2: ändra bakgrund på en bild

Bra, när vattenstämpeln väl är borttagen som jag nyss förklarade (fler alternativ senare) klickar jag på "background" för att ta bort bakgrunden:

Sådär, nu har vi bilden utan bakgrund:

Och så lägger jag till vilken bakgrund jag vill genom att skriva en prompt. Till exempel en undervattensbakgrund:

Jag placerar honom i djungeln:

Eller i New York:

Not bad, eller hur?

Skapa illustrationer med bakgrund direkt

När du känner till de här möjligheterna vill jag påpeka att det egentligen hade varit myyyycket enklare att skapa bakgrunden direkt med bildgeneratorn, till exempel som i de här två exemplen:

Prompten är:

"Diver in a bright blue submarine suit, with a black diving suit covering his face completely, against a dark and terrifying background of the deep sea.".”

I fetstil ser du hur jag talar om att jag vill ha en bakgrund i bilden.

Snabbare och enklare, så beroende på vad jag behöver väljer jag den långa manuella metoden eller den snabba automatiska.

Skapa en illustration eller komplex komposition

Möjligheten att ta bort bakgrunder eller lägga till andra i våra bilder är praktisk i olika situationer.

En av dem är om du behöver skapa en komplex komposition med olika element och bakgrunder.

I vårt exempel kan du tänka dig att jag vill lägga till två dykare till till höger eller vänster om huvudpersonen och en jättelik bläckfisk bakom. Plus havsbotten förstås.

Då skulle jag behöva:

1. Skapa varje element separat med Firefly som vi såg i föregående steg.
2. Ta bort bakgrunden från vart och ett som vi har sett.
3. Skapa kompositionen i Photoshop och spara.

För att få något i stil med det här:

En "illustration" där vilken professionell illustratör som helst tydligt ser en enorm förbättringspotential.

Men jag har sett sämre omslag till tv-spel.

Och viktigast av allt: den är gjord på mindre än tio minuter.

På riktigt.

Från noll.

Åtminstone jag tycker att det är häpnadsväckande med förhållandet resultat / tid är häpnadsväckande..

Och Firefly gör det möjligt att utföra två av de tre stegen -skapa alla element för en professionell illustration / komposition och frilägga dem från bakgrunden- MYCKET snabbt.

För första gången i historien är vår kreativitet faktiskt gränsen..

Inte våra färdigheter i design eller retusch.

Inte tiden vi har.

Vår fantasi. Helt enkelt.

Färgvariationer i vektorer och texteffekter

Firefly har två andra funktioner som jag ännu inte har använt.

Den ena är att skapa färgvariationer i vektorillustrationer..

Återigen är den mycket enkel att använda: du laddar upp en SVG och skriver en prompt eller använder alternativpanelen:

Den andra tillgängliga funktionen är att skapa texteffekter.

Jag antar att jag någon gång använder den till en banner eller något annat format, men just nu kan jag bara säga att för att använda den skriva ordet eller texten och välja effekten.:

Därmed avslutar vi användningsfallen för Firefly, men ett löfte är ett löfte…

Så tar du bort Firefly-vattenstämpeln

Innan vi börjar tycker jag att det är nödvändigt att upprepa att bilder som genereras med Adobe Firefly på webbplatsen INTE har licens för kommersiell användning.

Kan vi göra det ändå? Ja, men på egen risk.

Bra, utöver detta måste du veta att varje gång vi laddar ned en bild från plattformen läggs den här vattenstämpeln till i nedre vänstra hörnet.

Det gäller både om vi skapar en bild från grunden och om vi använder generativ fyllning för att ta bort eller byta bakgrund.

Men det finns sätt att slippa den om vi vill använda bilderna kommersiellt.

Vi börjar med det enklaste.

#1. Genom att beskära bilden

Självklart, eller hur?

Jag laddar ned hela bilden och beskär den sedan i Photoshop eller liknande så att vattenstämpeln hamnar utanför:

Om du minns definierade vi formatet i steg 3 i handledningen. Då sa jag att det fanns två faktorer att ta hänsyn till när vi valde det:

• Formatet vi ville ha för bilden.
• Vattenstämpeln.

Om vi till exempel vill ha en kvadratisk bild till ett Instagram-inlägg kan vi välja ett liggande format ("landscape" eller "widescreen") och sedan beskära som på bilden ovan.

Vattenstämpeln hamnar utanför den slutliga kompositionen.

Förstora den beskurna bilden

Om bilden efter beskärningen är för liten för det vi behöver kan vi alltid ta hjälp av Waifu för att förstora den.

Det är ett verktyg jag använder hela tiden för sådant här, eftersom det förstorar en bild till det dubbla (eller fyrdubbla) med betydligt mindre kvalitetsförlust än dagens konkurrenter.

Dessutom är det gratis och väldigt enkelt att använda:

1. Välj bilden.
2. Välj inställningarna.
3. Ladda ned.

#2. Genom att redigera bilden

Kanske det mest uppenbara sättet och det första man kommer att tänka på.

Men det finns förstås ett par olika angreppssätt med den här tekniken.

Med Firefly självt

Som vi gjorde i handledningen om generativ fyllning med dykarens arm.

Det enklaste sättet, även om det inte alltid fungerar.

Med Photoshop (eller liknande)

Om du kan redigera kanske du börjar direkt här:

Kopiera, klistra in, klonstämpel, innehållsmedveten fyllning och så vidare.

Utöver vår vanliga arsenal lägger prenumerationsversionerna av Photoshop Fireflys generativa fyllning, vilket innebär att vi får de två metoderna vi pratar om i ett och samma verktyg.

Perfekt.

#3. Ta en hel eller partiell skärmbild

Nu går vi vidare till mer kreativa men väldigt enkla metoder.

När du har skapat bilden i Firefly kan du, i stället för att klicka på ladda ned och få vattenstämpeln, göra något annat: ta en hel eller partiell skärmbild av webbläsarfönstret.

När du har skärmbilden kan du finjustera beskärningen i Photoshop eller liknande, med två fördelar:

• Bilden du får på det här sättet har redan högre upplösning än den nedladdade bilden.
• Dessutom kan du använda hela bilden utan vattenstämpel i hörnet.

Det här är alltid användbart, men ännu mer om du har en 4k-skärm, eftersom skärmbildens upplösning då blir enorm och till och med fungerar för trycksaker (som kräver högre upplösning än digitala format).

#4. Elementinspektören

En metod som liknar den föregående men är lite mindre manuell och mer techie..

Den går ut på att vi, när bilden vi vill ha har genererats, i stället för att ta en skärmbild letar upp bildens originalfil i koden så att vi kan spara den på vår PC.

Först öppnar jag inspektören genom att högerklicka i det skuggade området bredvid bilden, eftersom den inte öppnas om jag klickar direkt på själva bilden (Adobe vill förstås göra det lite svårare för oss):

Nästa steg är att hitta bildens källfil. Du behöver kunna lite HTML för detta, men det är inte svårt:

Jag högerklickar på bildens sökväg i HTML och väljer "öppna i ny flik":

Det öppnar bilden i en ny webbläsarflik med mer än hygglig upplösning och utan vattenstämpel. Sedan kan jag spara den på datorn som vanligt:

Det här är den sista teknik jag känner till för att ladda ned bilder från Adobe Firefly utan vattenstämpel.

Som du ser är de olika och jag använder den ena eller den andra beroende på situationen. Vänj dig vid alla så blir vattenstämpeln aldrig mer ett problem.

Efter den här ordentliga genomgången av verktyget kan vi börja dra några slutsatser. Men först…

Fördelar med Adobe Firefly

Jag ser framför allt tre fördelar med det här verktyget jämfört med konkurrenterna.

Till att börja med är en av de viktigaste att det är gratis.

Och utan begränsning för generering eller nedladdning. Åtminstone än så länge.

Det är inte så att Midjourney är särskilt dyrt -snarare tvärtom- men om du bara behöver bilder då och då sparar du åtminstone lite pengar.

Den andra fördelen jag ser är att det är kraftfullt och samtidigt enkelt.

Det vill säga, det är relativt lätt att få bra resultat och sidopanelen hjälper till.

Andra verktyg som Stable Diffusion är visserligen mycket kraftfulla – särskilt i sina senaste versioner – men har en brantare inlärningskurva. Med enkla prompts och sidopanelen i Firefly får du däremot mycket bra resultat redan från början.

Den sista tydliga fördelen jag ser är att det, tack vare den här sidopanelen, går att skapa en egen stil för bilderna. Om jag alltid använder samma stilar och effekter -en kombination som ger bilder med en viss personlighet- kan jag hålla en konsekvent stil genom ett helt projekt (bilder till en webbplats, illustrationer eller kommunikationsmaterial för en kund).

Nackdelar med Adobe Firefly

Men allt kunde förstås inte vara positivt här.

Den här AI:n har också sina svagheter. Och de är inte direkt små:

Till att börja med tillåter webbplattformen inte kommersiell användning av de genererade bilderna.

Visst kan du göra det, men då riskerar du böter. Så du bestämmer själv.

I det avseendet kommer den andra komplikationen från vattenstämpeln som läggs till på varje skapelse.

Jag har förklarat de sätt jag känner till för att komma runt problemet, men det är fortfarande ett irritationsmoment.

Nästa nackdel jag ser är att Firefly i många fall fortfarande inte hanterar generering av ansikten och händer särskilt bra. Bilderna kan i övrigt vara korrekta, men just de här delarna blir deformerade. Om det händer får du ändra prompten och hålla tummarna.

I det avseendet tycker jag att den, trots att den är kraftfull, fortfarande ligger ett litet steg bakom den senaste modellen av Midjourney, som förutom att minska deformationer av fingrar och ögon också genererar bilder med lite högre kvalitet.

Om vi faktiskt jämför den med det verktyget ser vi att Firefly saknar vissa funktioner, eftersom den inte kan:

• Generera webbgränssnitt.
• Generera logotyper som ser vettiga ut.
• Kopiera stilen hos välkända konstnärer .
• Använda en extern bild som referens.

Det här är alla mycket användbara funktioner som Midjourney har och Firefly ännu saknar.

Till sist ett par mindre detaljer:

Jag har märkt att vissa komplexa begrepp som "monokel" inte känns igen av Firefly i en komposition. Det beror inte på att prompten är komplicerad: om du byter ut ordet mot "glasögon" fungerar det utan problem.

Jag har stött på flera sådana fall och det är besvärligt att leta efter alternativ eller så finns det helt enkelt inget.

Det ska sägas att verktyget klarar de här begreppen när de skrivs separat, så jag antar att det bara är en tidsfråga innan det känner igen dem.

Slutligen kan man lägga till att du än så länge bara kan använda prompts på engelska.

Det gäller inte bara Firefly, men så är det, och om vi vill använda komplexa prompts och inte är särskilt hemma på Shakespeares språk måste vi ta hjälp av externa översättare.

Slutsatser

När verktygets grundläggande användningsområden, fördelar och nackdelar väl är förklarade är min slutsats att om nackdelarna inte är ett problem -vilket de inte kommer att vara för många- så är det här ett fantastiskt verktyg.

Ett av dem som förändrar spelreglerna.

Men vi får förstås vänta tills Adobe lanserar sin kommersiella version för privatpersoner -det finns redan ett företagsalternativ- för att se priset och bedöma om det verkligen är värt det eller om det betalda alternativet (Midjourney) eller det kostnadsfria (Stable Diffusion) är bättre.

Tills vidare rekommenderar jag att du börjar leka med det, för du kan faktiskt bli riktigt positivt överraskad.