Deepfakes per la danza: è ora possibile utilizzare ai falsi quei passi di danza che hai sempre voluto

0
177

L’intelligenza artificiale sta dimostrando di essere un ottimo strumento quando si tratta di manipolazione di video di persone. Faccia lo scambio deepfakes sono stati l’esempio più visibile, ma nuove applicazioni ogni giorno. L’ultima? Chiamare deepfakes per ballare — usa AI di leggere di qualcuno passi di danza e di copiarli su un corpo di destinazione.

La scienza qui è stato fatto da un quartetto di ricercatori di UC Berkley. In quanto descrivono in un articolo pubblicato su arXiV, il loro sistema è composto da un numero di passi discreti. Prima, un video del target è registrato, e una sub-programma trasforma i loro movimenti in una figura stilizzata. (Molto di un sacco di video che è necessario per ottenere una buona qualità di trasferimento; a circa 20 minuti di filmati a 120 fotogrammi al secondo). Poi, una sorgente video e un bastone figura dei loro movimenti. Quindi, lo swap accade, con una rete neurale la sintesi video del target individuale basato sulla figura del bastone movimenti di origine.

Il sistema può essere utilizzato per trasferire tutti i tipi di stili, dalla danza moderna al mondo del balletto.

Sembra semplice come questo, naturalmente, ma ci sono un sacco di intelligente ingegneria al lavoro qui. Per esempio, c’è una subroutine che uniforma il movimento dello stick figure in modo che i ballerini non scatto di troppo, e completamente separata rete neurale dedicato a re-analisi dell’obiettivo volto a garantire il realismo.

Ci sono anche delle limitazioni per il programma. La rete non in grado di modellare accuratamente tessuti morbidi per esempio, in modo che il target individuo ha di indossare abiti attillati. Nel video qui sopra, si può anche vedere un bel paio di visual anomalie; momenti in cui le articolazioni di origine e di destinazione ballerino non abbastanza in linea, o in cui il software di intelligenza artificiale non riusciva a riprodurre i movimenti complessi, come una mano lanciando dalla parte posteriore a quella anteriore.

Ancora, però, è un lavoro impressionante. È il tipo di manipolazione video che sarebbe probabilmente prendere un intero team di giorni per produrre. Ora, tutto ciò che serve è qualche sorgente video e il diritto AI software. Aspetta di essere trasformato in un app prima di troppo lungo, e non la penso sulle possibili implicazioni su ciò che la tecnologia, come questo farà per la nostra fiducia di prove video.