Audiovisuele creatie met AI: wat je wel en nog niet professioneel kunt maken

Op 19 en 20 november 2024 vond in Málaga de Upscale Conf 2024 plaats, een van de indrukwekkendste AI-evenementen die ik me wereldwijd kan herinneren.

Dat was te verwachten, gezien de sprekers en de bedrijven waar ze vandaan kwamen (Freepik, Google, Microsoft, GitHub, ElevenLabs, Magnific AI, Founderz…).

Behalve bekende gezichten uit de technologische top van Málaga te zien, hielp het evenement me ook nieuwe mensen te ontmoeten. Je krijgt tenslotte niet elke dag de kans om met een journalist van Business Insider te praten, een van mijn favoriete dagelijkse nieuwsbrieven.

Het hielp me ook met iets anders: de huidige stand van AI zien en begrijpen welke wereldwijde impact die NU AL op de creatieve sectoren heeft.

En daar gaat dit artikel inderdaad over: een overzicht geven van de lezingen en duidelijk maken waar we inmiddels staan. Ik kan alvast verklappen dat we verder zijn dan ik vóór de conferentie had verwacht.

Maar voordat ik inhoudelijk begin, moet ik zeggen dat de faciliteiten van SOHRLIN Andalucía, vlak bij een andere leuke evenementenlocatie, La Térmica, me aangenaam verrasten. Die laatste is ouder en bekender.

Je merkt dat Antonio Banderas achter het project zit, want het audiovisuele niveau en het comfort van de faciliteiten waren bijzonder hoog.

De meer dan 500 mensen die het evenement bijwoonden, zaten zeer comfortabel en volgens mij gebruikten we slechts de helft van de capaciteit.

Goed, genoeg inleiding, tijd voor het echte werk: ik neem alle lezingen een voor een door en vertel je wat ik uit elke sessie heb gehaald.

Martin LeBlanc – Freepik

We begonnen sterk.

Van alle lezingen vond ik deze het beste.

Ik maakte als een bezetene aantekeningen en bleef ondertussen foto’s en video’s maken.

Waarom?

Omdat Martin, hoofd product bij Freepik, uitlegde wat er allemaal met AI mogelijk is en al het benodigde materiaal rond een denkbeeldig project voor hernieuwbare energie maakte, Solar Nomad genaamd.

Als ik alles zeg, bedoel ik:

#1. Webdesign

Met deze workflow:

1. Sketch to Image (perfect om te beginnen wanneer we al iets in gedachten hebben).
2. Reimagine (varianten waarbij een specifiek onderdeel wordt gewijzigd).
3. Expand (marges uitbreiden).
4. Retouch (specifieke dingen retoucheren, zoals in Photoshop maar dan eenvoudig).
5. Scale (de resolutie verhogen en tegelijk handen corrigeren).

Martin liet zien hoe je in enkele minuten een landingpage met hero banner en copy voor het project maakt.

Natuurlijk zijn alle hierboven genoemde tools, die hij in de demonstratie gebruikte, van Freepik, mocht je je dat afvragen.

Maar als je liever andere tools gebruikt, blijft het proces hetzelfde.

Dat was goed, maar niets vergeleken met wat daarna kwam…

#2. Videoadvertentie

Hier vielen de monden open van iedereen die de demo zag. Dit was het eindresultaat, volledig met AI gegenereerd:

Om dat te bereiken volgde Martin deze workflow:

Storyboard

Dit doet AI niet, in elk geval die van Freepik nog niet.

Wij leveren het zelf aan. En ja, je kunt natuurlijk ChatGPT gebruiken om het op te bouwen.

LoRAs

Wat de AI van Freepik wél doet, is de samenhang tussen de verschillende benodigde clips behouden:

Om een video, een advertentie of iets anders, te laten werken, is het essentieel dat steeds dezelfde persoon of hetzelfde personage verschijnt.

Om dat te bereiken is het proces als volgt:

1. We maken of uploaden verschillende afbeeldingen van dezelfde persoon
2. We schrijven prompts voor verschillende situaties.
3. Zo krijgen we voor elke clip een afbeelding die met de rest consistent is.
4. Tot slot monteren we alles in een willekeurige video-editor. Voorlopig doet AI dit deel niet.

Goed, er is nog één klein advies.

En het is cruciaal.

Image to Video

Naast hulp bij het invoeren en verbeteren van prompts is het uploaden van afbeeldingen van hoge kwaliteit een van de sleutels tot video’s van hoge kwaliteit.

Met andere woorden: een goede resolutie.

Daarvoor voeren we een upscaling van de afbeelding uit voordat we de video genereren. Onder meer daarvoor kochten ze destijds Magnific.AI 😉

Hoewel je het op de stilstaande afbeelding niet ziet, is het kwaliteitsverschil tussen de video’s die met de ene en de andere afbeelding zijn gegenereerd duidelijk.

Audio voor de video

Op dit punt zijn er twee onderdelen:

1. De voice-over.
2. De achtergrondmuziek.

Freepik heeft tools voor beide:

Freepik Tunes

Om de stem te genereren hoeven we alleen de tekst te uploaden en de best passende stem te kiezen.

Als je ElevenLabs hebt gebruikt, ken je het proces.

Video Match

Zodra de voice-over klaar is, moet de achtergrondmuziek worden toegevoegd.

Daarvoor upload ik de video en geeft de tool me verschillende opties voor muziek, waarbij de stem bovendien wordt geïntegreerd.

Het resultaat is ronduit verbluffend.

Tijd en middelen voor het proces

Martin vertelde dat de volledige advertentievideo hem 10 uur kostte.

En dat door één persoon..

Ik weet niet of je ooit aan een buitenopname hebt meegewerkt, maar ik kan je verzekeren dat het bepaald niet snel gaat en dat alleen al het opbouwen en afbreken van de apparatuur flink wat tijd kost.

En dat is alleen het eindresultaat: daarvoor moet je locaties zoeken en vastleggen en acteurs casten.

Het resultaat is dus verbazingwekkend en maakt het voor mkb-bedrijven mogelijk advertenties te produceren met een kwaliteit die vergelijkbaar is met die van grote merken.

Ik heb de kosten in euro’s van de Freepik-tools die hiervoor nodig zijn niet berekend, maar ik verwacht dat ze ongeveer 100 tot 1.000 keer lager liggen dan bij het op de ‘normale’ manier opnemen van een reclamespot.

Nogmaals: tussen de 100 en 1.000 keer goedkoper dan een van die reclames die je voor elke film op Prime Video moet uitzitten.

Nu ik deze lezing heb samengevat — degene die de meeste indruk op me maakte en die ik daarom uitgebreid wilde bespreken — vat ik de rest van de conferentie samen aan de hand van de belangrijkste punten van elke sessie.

Nick Coronges – R/GA

Nick liet voorbeelden zien van hoe technologie bedrijven dwingt te schakelen. Freepik kan erover meepraten: het moest in recordtijd veranderen van een afbeeldingenmarktplaats in een AI-platform.

Hij legde ook de nadruk op het gebruik van AI voor merken. We moeten onze creatieve pipeline opnieuw doordenken.

Dankzij AI kunnen we momenteel blijven doen wat we al deden, maar dan beter.

Nick stelt echter voor om die benadering om te draaien en na te denken over wat we met AI kunnen doen wat vroeger niet mogelijk was.

Hij gebruikte als voorbeeld de rebranding van Android die het bureau dit jaar uitvoerde, en hoe AI na het trainen van het model hielp om oneindig veel variaties van de robot te maken.

Dit illustreert wat hij beschouwt als een merkbureau dat AI-native werkt..

Hugo Barbera – HumAInmade

Hugo is een creatief talent.

Dat merk je vanaf de eerste minuut. Hij vertelt over zijn ervaring met AI, die niet van gisteren is: hij werkt er al jaren mee. Dat zie je terug in zijn creaties:

Bovendien vertellen zijn futuristische creaties, binnen de luxemarkt waarop zijn bureau zich richt, altijd een verhaal. Hoe je ze ook wilt noemen, dat is de sleutel tot hun succes.

Hier zijn twee voorbeelden:

Persoonlijk deden ze me sterk denken aan de strips van Métal Hurlant die ik bijna 30 jaar geleden las en die dankzij Kickstarter gelukkig weer tot leven zijn gekomen, maar dat is een ander verhaal.

Laia Grassi

Laia’s lezing zat boordevol inhoud.

Om te beginnen wees ze op het enorme aantal gebieden dat door de komst van AI wordt geraakt, veel meer dan je op het eerste gezicht zou denken.

Natuurlijk presenteerde ze cijfers over de voor 2025 geschatte banen die met AI samenhangen, in beide richtingen, en die waren verbijsterend:

• 97 miljoen nieuwe banen.
• 85 miljoen banen vervangen door AI.
• Een positief saldo van 12 miljoen banen.

En dat alleen al in 2025.

Bedenk aan welke kant je wilt staan… en kom in actie.

Nadat de context was geschetst, legde ze de verschillen uit tussen de manier waarop creativiteit in het menselijk brein wordt beheerd en hoe AI dat doet.

Daarnaast liet ze een paar echte campagnes zien waarin AI wordt gebruikt.

De eerste was bedoeld om een fotoshoot in idyllische omgevingen na te bootsen voor een bedrijf dat de werkelijke uitvoering niet kon betalen:

Het is vergelijkbaar met wat ik over de advertentie uit de eerste lezing vertelde, maar dan toegepast op een fotosessie.

Het andere voorbeeld bestond uit advertenties voor een webshop, waarin het product werd gecombineerd met door kunstmatige intelligentie gegenereerde objecten — sorry voor de videokwaliteit, maar ik moest flink inzoomen:

Als afsluiting gebruikte ze een geweldige uitspraak die volgens mij van Steve Jobs was:

‘Creativiteit is het vermogen verbanden te zien waar anderen die niet zien, gevestigde patronen te doorbreken en nieuwe oplossingen te bedenken.’

Pau García Mila – Founderz

Pau gaf een bijzonder onderhoudende lezing, vol grappen maar ook vol inhoud.

Zo konden we live de bekende mythe meemaken van een startup oprichten in 15 minuten — op de klok — met AI.

Dit was de workflow:

• Hij vroeg Copilot om te beginnen met het bedrijfsplan van de startup.
• Daarna liet hij het financiële plan uitsplitsen in tabellen.
• De teksten voor sociale media.
• De video’s — misschien het minst geslaagde onderdeel, maar hij had slechts 15 minuten voor alles.
• Een presentatie voor investeerders.
• En een landingpage

Het idee was niet om een startup te bouwen die meteen zou werken, maar ons te laten begrijpen hoe snel je er een kunt opzetten.

En ons te laten zien dat AI ons ‘faster and cheaper’ laat falen, waardoor we in vrijwel geen tijd veel, héél veel ideeën kunnen lanceren en testen welke misschien werken, om vervolgens met die ideeën door te gaan.

Het is dezelfde methode als die van early-stage- investeerders in startups, maar dan toegepast op het oprichten van de startup zelf.

Als je nieuwsgierig en ondernemend bent, is het idee bijzonder verleidelijk…

Naast zijn lezing trad Pau ook op als moderator bij de wedstrijd voor AI-startups tijdens het evenement.

Er waren er vier geselecteerd:

• Journo: AI-content voor journalisten, voor SEO, social media…
• Brandfy: met AI een volledig merk creëren.
• ConsistentCharacter: visuele storytelling.
• PiktID: modellen maken voor fotoshoots.

De laatstgenoemde won, mocht je er eens naar willen kijken.

George Eid – AREA 17

In een wat metafysischere sfeer legde George met voorbeelden uit waarom verhalen werken en aan welke regels succesvolle verhalen voldoen.

Bij AI kunnen we dit verbinden met macht en magie.

Justin Hackney – ElevenLabs

Eerlijk gezegd had ik als fan van de tool zeer hoge verwachtingen van deze lezing. Maar in werkelijkheid valt die samen te vatten in één zin:

‘De verhalen die we vertellen, vormen onze werkelijkheid.’

Nerea Luis

Nerea had de moeilijke taak ons na de lunch wakker en scherp te houden. En dat lukte.

Ze richtte zich op vier toepassingen waarin AI ons kan helpen sneller en slimmer te communiceren. Volgens haar zijn dat:

• UX-personalisatie.
• Copywriting en commerciële content.
• Conversatie-interfaces testen (chatbots en QA).
• Prototyping en conceptontwikkeling.

Ze gebruikte het voorbeeld van Netflix: hoe algoritmen het gebruik van video-apps opnieuw hebben gedefinieerd, waardoor we de zoekfunctie bijna niet meer gebruiken, al doet een enkele nerd zoals ik dat zo nu en dan nog wel.

Ze raadde ons ook aan om NotebookLM een kans te geven. Volgens haar is dit de volgende stap na ChatGPT, omdat het dankzij de ‘bubbles’, een soort tooltips die meer informatie tonen wanneer je eroverheen beweegt.

Rondetafelgesprek, moderator: Andrés Torrubia – Medbravo

Daarna volgde een rondetafelgesprek over de huidige stand van AI bij het genereren van video.

Dit waren de belangrijkste punten van elke deelnemer:

• Stacie Chan: over de acht seconden video die haar applicatie kan maken, zei ze dat beperkingen goed zijn voor creativiteit, omdat ze ons dwingen beter na te denken. En daar ben ik het, tot op zekere hoogte, volledig mee eens. Je hoeft maar naar de ‘extended versions’ of ‘director’s cut’ van een film van Ridley Scott te kijken om te zien hoeveel baat hij heeft bij een producent die hem afremt.
• Mike Ramos: deze audiovisuele producent merkte op dat we ons bewust moeten zijn van de beperkingen en onze manier van denken en creëren moeten veranderen voordat we een tool gebruiken. Misschien kun je niet hetzelfde doen als vroeger, maar je kunt wel nieuwe dingen verkennen.
• Javi López: tot slot zei de medeoprichter van Magnific.AI dat hij bij het maken van AI-video veel tijd besteedt aan onderzoek en testen tot er iets fatsoenlijks uitkomt. Daarnaast wees hij op consistentie als de sleutelfactor om AI te gaan gebruiken voor video’s die langer duren dan enkele seconden of minuten. Zonder consistentie is dat onmogelijk.

Elizabeth Laraki – voormalig Google

Ze begon door te laten zien hoe we prompting kunnen leren:

• Trial-and-error.
• Door de feedback van de tools te bekijken.
• Prompts die andere gebruikers op forums en portals delen (‘probeer dit…’).
• Reverse prompting: op AI-platforms zoals beeldgeneratoren, waar we de prompt kunnen bekijken die een afbeelding heeft voortgebracht en het resultaat kunnen nabootsen.

Op die manier kwam ze uit bij de volgorde van elementen in een prompt voor professionele afbeeldingen, en die is als volgt:

Hier is die als tekst:

[Subject] + [Action/Pose] + [Setting/Environment] + [Lighting] + [Camera Angle] + [Style] + [Atmosphere] + [Technical Specifications] + [Aspect Ratio]

Ik weet niet of jij deze structuur kende — ik niet —, dus ik bewaar hem om meteen uit te proberen.

David Jensenius – GitHub

Bij de laatste lezing begreep ik niet helemaal wat de kern was. Een paar leuke voorbeelden, maar weinig dat op echte projecten toepasbaar leek.

Of misschien wist ik het niet op waarde te schatten, mede door wat ik hierna vertel.

Conclusies

En dat was wat Upscale Conf 2024 opleverde.

Of beter gezegd: dat was wat ik kon bijwonen voordat een moordende verkoudheid me naar huis stuurde en me twee volle dagen in bed hield.

Hoewel ik de lezingen op de tweede dag niet kon bijwonen, denk ik dat de sessies die ik hier heb genoemd een uitstekend beeld geven van waar we nu staan met AI-creatie en waar het binnenkort naartoe gaat.

Als anekdote — die tegelijk als conclusie dient — keek ik naar de lezingen samen met de directeur van het grootste communicatie- en reclamebureau van Málaga. Hij keek naar wat eraan kwam met een mengeling van blijdschap en bezorgdheid in zijn ogen..

Een goed verstaander heeft aan een half woord genoeg.

En terecht, gezien wat er op ons allemaal afkomt.

Nu het artikel voorbij is, vraag ik je: houd je van AI? Dan vind je hier meer artikelen over kunstmatige intelligentie.

Als je die hebt bekeken en elke donderdag per e-mail een artikel over AI en digitale bedrijven wilt ontvangen, schrijf je hier in..