Motion capture: taking Hollywood by storm [guestblog]

By Samsung Nederland 09.09.2016

Culture Film Visual effects

motion capture dennis kleyn

The Jungle Book, Planet of the Apes, Avatar en The Lord of the Rings; allemaal hebben ze het gebruik van tenminste één techniek gemeen: motion capture. Deze maand neemt de Nederlandse visual effects supervisor Dennis Kleyn je mee naar de filmsets waar de techniek op miraculeuze wijze werd toegepast en legt hij je uit wat daar allemaal bij komt kijken.

Wat is motion capture?

Motion capture is, kort uitgelegd, een techniek waarbij een acteur, stuntman, of zelfs dier, een speciaal pak aantrekt en daarmee 3D bewegingsinformatie kan overbrengen naar een computer. Op het pak zitten op de belangrijkste 'buig-en sleutelpunten' zoals knieën, ellebogen, voeten en het hoofd sensoren die, gemeten met een systeem rondom de acteur, doorlopend informatie registreren over waar dat punt zich in de (driedimensionale) ruimte bevindt. Door deze gegevens te koppelen aan een 3D model van een heel ander, niet-bestaand personage (bijvoorbeeld King Kong, of een fictief monster), neemt dat 3D model die 'realistische' bewegingen over. Vaak hebben de sensoren op het pak de vorm van witte balletjes, maar er worden ook andere 'markers' gebruikt om het gewenste resultaat te bereiken. In deze guestblog hebben we het uiteraard alleen over motion capture toegepast bij films, want de techniek wordt ook gebruikt in het leger, de medische en industriële wereld en sport.

Star wars motion capture

Motion Capture vs Character Animation

Waarom kies je voor motion capture terwijl een 3D model ook geanimeerd kan worden? Dat ligt erg aan wat er specifiek nodig is. Een 'creature' dat zó ver van menselijke (of dierlijke) anatomie af staat dat een vertaling vanuit een echte beweging niet mogelijk is, kan uiteraard meer gebaat zijn bij geanimeerde bewegingen die door een animator worden bepaald. Maar een gorilla of schepsel zoals Gollum (Lord of the Rings) kan door een acteur met een specialisme in een fysieke vorm van acteren, heel veel nuance en detail in een performance leggen. Zoveel dat hetzelfde niet of nauwelijks te bereiken is met traditionele animatie, of buitensporig veel tijd zou kosten.

Wel zorgt de techniek ervoor dat de acteur in zijn directe fysieke omgeving interactie aan moet kunnen gaan met objecten of voorzien moet worden van specifieke faciliteiten om de gewenste bewegingen te kunnen maken. In de film kan een aap uiteindelijk op een rots springen, maar de acteur met het motion capture pak zal dus ook, om die beweging te kunnen maken, op een soortgelijk object (van enigszins dezelfde hoogte, etc.) moeten kunnen springen. Vaak wordt daarom in de studio een setup gecreëerd die een abstracte vertaling is van de wereld waarin later het ge-motion capturede model in geplaatst zal worden.

Toch is motion capture zeker geen '1-click solution'; de data die wordt opgeslagen moet grondig worden 'gecleaned' voordat er een strak resultaat uit komt. Dat cleanen is tijdrovend en moet als onderdeel van de techniek voor lief worden genomen. Bovendien zijn animatoren daarna ook nog betrokken bij het verder vertalen en werkbaar maken van de 'opgenomen' bewegingsdata.

Motion capture in The Jungle Book

Een korte 'behind the scenes' van The Jungle Book bekijk je hier. Naast motion capture is er ook aandacht voor andere vfx-gerelateerde technieken en het onzichtbaar samenbrengen daarvan:

'Performance Capture'

Werd motion capture tot een aantal jaar geleden gebruikt voor met name de basale bewegingen, inmiddels is de techniek zo verbeterd dat zelfs de meest subtiele expressies van het gezicht tegelijkertijd met de motion capture kunnen worden opgenomen. De acteur draagt dan, naast het pak met de 'key' sensoren, ook een helm met een camera die permanent op het gezicht gericht staat. Een grid van zeer kleine puntjes dat op het gezicht is aangebracht (door make-up of als een soort masker) werkt eigenlijk op dezelfde manier, maar dan met een veel hogere concentratie aan punten die de computer kan tracken. Die (spier)bewegingen worden dan ook vertaald naar de belangrijkste digitale spieren in het gezicht van een 3D personage. Als er sprake is van een motion capture van zowel lichaam als gezicht, spreekt men ook wel van een 'performance capture'.

Andy Serkis en The Imaginarium Studios

Alhoewel de techniek overal ter wereld bij verschillende posthuizen voor een zeer brede variatie aan producties wordt ingezet, is er toch een soort 'icoon', een pionier op het gebied van motion capture; Andy Serkis. Serkis, van oorsprong een 'gewone' acteur, werd eind jaren '90 door Peter Jackson benaderd om Gollum (of 'Smeagol') van een stem te voorzien. Na het fenomenale succes van de trilogie volgde er een lange lijst indrukwekkende titels, waaronder; King Kong, Planet of the Apes (de twee recente edities en een derde op komst) en meer recent Star Wars: The Force Awakens.

Serkis heeft er inmiddels zijn specialisatie van gemaakt en biedt zijn diensten aan via zijn bedrijf The Imaginarium (waar overigens inmiddels een heel team van specialisten aan de vraag naar motion capture probeert te voldoen). http:// www.imaginariumuk.com

Camera visual

Over visual effects supervisor Dennis Kleyn

Visual effects supervisor Dennis Kleyn (1980) is eigenaar van de Nederlandse visual effects studio Planet X FX en met zijn team verantwoordelijk voor de effecten in vele Nederlandse film-en televisieproducties. Tevens is hij mede-oprichter van de NVX, de Nederlandse Vereniging van Visual Effects Professionals. Dennis is een maandelijkse guestblogger voor Samsung Discover en bespreekt daarin opvallende, actuele of interessante visual effects gerelateerde onderwerpen, zoals:


Wil je Dennis' guestblogs direct in je inbox ontvangen? Abonneer je dan op de gratis Discover nieuwsbrief. Je ontvangt dan niet alleen de exclusieve guestblogs van Dennis, je kunt 'm ook volledig personaliseren zodat je alleen het Discover nieuws ontvangt waar jij geïnteresseerd in bent.