Deepfakes hjalp Charli XCX imitere Spice Girls i sin nyeste musikkvideo

Når mainstream lesere ble først oppmerksom på deepfakes i slutten av 2017, og det var takket være en skummel subkultur som brukes ansiktet-bytte verktøy for å sette inn kjendiser i pornografi. Mer nylig, har ekspertene bekymret for at det samme AI-teknologi kan supercharge falske nyheter. Men her er bevis for at deepfakes kan også brukes til mainstream video redigering: den nyeste musikkvideo fra Charli XCX bruker teknologi som en spesiell effekt.

“1999” video er et perfekt eksempel på bruk for deepfakes. I det, Charli og sanger Troye Sivan betale hyllest til ulike 1990-tallet touchstones, som Steve Jobs, TLC “Fossefall” musikk video, Titanic, Nokia 3310, The Sims, og så videre. På to punkter, skaperne av videoen brukt de samme grunnleggende deepfakes algoritmer for å lime inn Charli og Sivan-tallet vender mot dansere å etterligne Spice Girls og Backstreet Boys.

“kan vi bruke denne rare falske celeb porno verktøy i en legit musikk video?”

Ryan Staake, video-direktør og leder for creative studio Pomp Og Innflytelse, sier at beslutningen om å bruke deepfakes var en del kunstneriske, en del praktiske. Snakker til Randen, Staake sier mannskapet hadde et begrenset vindu for å skyte videoen, så de brukte deepfakes for å unngå å måtte kle opp de to sangerne som hvert enkelt medlem av bandene.

“Når du begynner å tenke på kompleksiteten i å få dem inn og ut av garderoben og makeup for hver av disse tegnene, og det ville ta fem ganger lenger, sier Staake. “Så på en måte, det var en pragmatisk løsning. Men så er vi også i gang med å spille av bizarreness og estetikk av det. Det er en av de tingene der en del av spenningen er bare å prøve å se om det fungerer. Liker, kan vi bruke denne rare falske celeb porno verktøy i en legit musikk video?”

Til tross for sitt rykte for å være en pornografi verktøyet, er den underliggende teknologien bak deepfakes er en del av en bred, legitime fagområde i AI. I løpet av de siste årene, ulike algoritmer har blitt utviklet som kan justere og redigere realistisk video. Forskere har laget verktøy som kan endre folks uttrykk og slå dem inn i det menneskelige dukkene. Arbeidet har også vært brukt i mainstream apps.

Selv om verktøy som Photoshop og After Effects kan oppnå tilsvarende resultater, maskinlæring algoritmer er ofte lettere for amatører å bruke — derav teknologi popularitet og eksperter’ frykter at det vil bli brukt for feilinformasjon og svindel.

Staake sier hans team har brukt samme grunnleggende algoritmer som første gang ble delt på Reddit, tilpasning av dem til å forbedre oppløsningen og redigere den resulterende opptakene litt å matche duft. Som er vanlig for denne typen prosess, algoritmer krever mye data av motivets ansikt. Staake sier det betydde å bli Charli XCX å “gjøre en rekke rare uttrykk på scenen — åpne sin munn, blinker hennes øyne — for å skape et solid grunnlag for algoritmer.”

Resultatet er i stor grad overbevisende, og Staake sier noe feil bare legge til effekten. “Jeg typen som at det er bare av nok som det er,” Hvem i helvete er som person?'”

“Det er et helt fantastisk redskap.”

Dette ser ut til å være første gang disse algoritmene har blitt brukt i en musikk video, og kanskje den første gangen de har vært brukt til kommersielle formål i det hele tatt. I henhold til Staake, det er bare begynnelsen. Han sier at hans team har brukt maskinen læring algoritmer i andre musikk-videoer (som denne, for å generere et postkort effekt), og deepfakes vil trolig bli en del av deres vanlige redigering toolkit.

“Vi har spilt rundt med en masse internt, å lære å bruke det, der det fungerer best,” sier han. “Jeg tror vi er definitivt kommer til å se mer av dette. Det er et helt fantastisk redskap.”