Skip to content

CREATIVEAILAB

“Down Bad”: muziekvideo met een vleugje A(I)nime

Een Grammy-waardige muziekvideo die van A tot Z wordt gerealiseerd zonder cameraploeg of studio, maar wel in cocreatie met AI-tools? Studenten Grafische en Digitale Media Jasmina Fernando, Müberra Daldal en Yerlin Marissen Blanco gingen de uitdaging aan en regisseerden een knappe clip in nauwe samenwerking met Runway, LensGo en Midjourney. 

Storytelling en song 

Het nummer “Down Bad” van muzikante Kainat vertelt het tijdloze verhaal van een meisje dat verliefd is op een jongen. Ze gaat haar love interest achterna doorheen een reeks surrealistische werelden in de hoop hem te vinden. 

AI-cinematografie en regie 

In hun zoektocht naar een coherente en passende stijl exploreerde het team verschillende bestaande cinematografische invalshoeken en sferen. Sleutelwoorden in deze AI-stijloefening waren onder andere “Tokyo Night”, “Fairytale” en “Anime”. 

AI-tools en technische uitwerking 

In hun onderzoek naar de beste combinatie van ondersteunende AI-tools landde het projectteam op Runway Gen-2, Lens.go en Midjourney. Zo bood Midjourney hen de nodige ondersteuning in het ontwikkelen van styleframes, hielp Lens.go hen een model te trainen dat nauw aansloot bij hun fysieke artiest en bleek deze tool -in samenwerking met Runway- het meest efficiënt voor een generative AI video-to-video workflow.

Save the date: workshop generative AI voor video 
Zin om zelf creatief aan de slag te gaan met generative AI voor video? Op woensdag 13 maart (om 14u) organiseren we hierrond een workshop in het Immersive Lab. Save the date!