Een nieuw bedrijf, Flawless, maakt gebruik van neurale netwerken om het dubben van films in andere talen moet verbeteren.
Gewoonlijk wordt eerste een film opgenomen. Vervolgens spreken voice acteurs hun tekst in bij de bestaande beelden, en gebruiken zij daarbij een script dat synchroon met de beelden moet lopen. Bij Flawless echter wordt de andere versie van het script eerst opgenomen, Daarna wordt het neurale netwerk getraind op de dagelijkse opnamen, onbewerkte beelden van het filmwerk van die dag, om miljoenen visuele datapunten te gebruiken om 3D modellen te maken van de gezichten van de acteurs.
Op basis daarvan maakt het nieuwe 3D-modellen die passen bij de dialoog in de vreemde taal. Op zijn beurt wordt dit dan omgezet naar 2D afbeeldingen, en de mensen van visual effects werken dan de foutjes weg die mogelijk gemaakt werden door de algoritmes.
Het geheel is een tijdverslindend proces, maar het resultaat is veel beter. De eerste film volgens dit procedé zou binnen het jaar moeten uitkomen.
Bekijk het filmpje in het artikel van InputMag. Het is echt indrukwekkend!
https://www.inputmag.com/culture/movie-dubbing-flawless-scot ...
|