Du vil ikke tro dine egne øyne: Dette nevrale nettverket vil danse for deg

Kunstig intelligens viste seg som en meget dyktig verktøy når det gjelder å manipulere video med folk. Den såkalte "dipfeyki" med utskifting av individer ble den mest fremtredende eksempelet, men nye programmer dukker opp hver dag. Den siste dipfeyki skaper dans - kunstig intelligens leser dansetrinn av en annen person, og pålegger den på målet kroppen.

Du vil ikke tro dine egne øyne: Dette nevrale nettverket vil danse for deg

Den vitenskapelige siden av dette alternativet er de fire studier fra University of California i Berkeley. Som de beskriver i en artikkel publisert i arxiv, er deres system sammensatt av flere adskilte trinn. Først den innspilte videoen med det formål og rutinen gjør sin bevegelse i form av pinner. (For god kvalitet kreves i størrelsesorden av 120 bps opptak for 20 minutter). Så er det en kilde med video og figur med spisepinner tar bort enhver bevegelse. Deretter skjer det en utveksling og det neurale nettverk syntetiserer video med den aktuelt individ, basert på bevegelsen av tall fra pinner. Det ser fantastisk. Se selv:

Du vil ikke tro dine egne øyne: Dette nevrale nettverket vil danse for deg

nettverk som skaper danse

Det høres alt, selvfølgelig, ganske enkelt, men i virkeligheten er mye mer komplisert. For eksempel er det en rutine, som jevner ut bevegelsen av tallene slik at danserne ikke mye rykninger og helt separate nettverk er utviklet for å re-ansikt-sporing mål å sikre realisme.

Programmet har sine begrensninger. Nettverket kan ikke nøyaktig simulere løs vev, så målet person trenger for å gå med trange klær. Det er også avvik. I alle fall, er arbeidet imponerende.

Du kan ikke vente med å danse ballett? Fortell oss i vår chat i telegrammet.