Motion capture: När vinner en motion-capture-aktor en Oscar? | WIRED

Rörelseinspelningsteknik: Grunder, mekanismer, tillämpningar och akademiska aspekter

Introduktion Konceptuell ramverk

Rörelsekaptur (MC)skelettdataperformance captureRise of the Planet of the ApesThe Lord of the Rings

Här är den kritiska distinktionen avgörande: I strikt mening avser motion capture endast kroppsrörelser, medan prestandainspelning å andra sidan inkluderar flera dataströmar som samtidigt fångar ansiktsuttryck, rörelser och röstinspelning. Som Andy Serkis uttrycker det är denna metod “ett verktyg som befriar skådespelaren från fysiska begränsningar”; men i teknisk litteratur beskrivs omvandlingen från insamlat rådata till slutlig bild som en där skådespelarens bidrag och animatörernas digitala ingrepp samverkar.

Teknik Mekanizmalar ve Sınıflandırma

Motion capture-systemer delas in i tre grundläggande kategorier enligt deras arbetsprinciper: optisk baserade, inertiala (tröta) och markörfria teknologier.

Optikbaserade system

Optiksystemer är standardlösningar som erbjuder högsta möjliga noggrannhet för rörelsespårning. De delas in i två undertyper:

• Pasiva markörer i system:
• Aktiva markörsystem:

Optiska systemers grundläggande begränsning är problemet med (bildtäckning) som uppstår när signalbärarens siktslinje blockeras; detta leder särskilt till dataförluster i områden som armhål och mellan fingrar.

Inertiala (rotations) system

Isotopiska kostymer utrustas med -enheter som består av accelerometer, gyroskop och magnetometer. Dessa sensorer mäter rörelse i förhållande till ett lokalt referenssystem, vilket innebär att inga externa kamerainstallationer krävs. Även om detta ger fördelar gällande bärbarhet, leder ackumulerad sensordrift vid längre pass till minskad noggrannhet; detta kompenseras därför vanligtvis med sceninterna kalibreringsalgoritmer.

Markeringar och bildbaserade metoder

Under de senaste åren har djupinlärningsbaserade utvecklats. RGB- eller djupkamrar kan genom kroppshållningsmodeller (body pose estimation) estimera skelettpositioner även från en enda kamera. Dessa ansatser sänker kostnaderna, men når inte helt den guldstandard noggrannhet som optiska system erbjuder.

Prestationslogg: Interaktionen mellan skådespelare och teknik

I modern filmproduktion har MC-tekniken gjort det möjligt att ta aktören ur ett isolerat postproduktionsmiljö och istället filma på samma plats som de riktiga skådespelarna. I filmen ryckte Rupert Wyatt ut Serkis och filmade honom tillsammans med James Franco i riktiga världsscener, vilket eliminerade gapet mellan prestation och miljö. I de tidiga arbetena var det nödvändigt att filma om Gollums närbilder i en isolerad miljö, medan den aktuella flödet har förvandlat denna process till en realtidsinteraktion.

I detta sammanhang är förhållandet mellan skådespeleriets råmaterial och animatörernas bidrag till den slutliga bilden fortfarande föremål för diskussion: även om skådespeleri är till produktionen, är det som syns på den slutliga skärmen inte en renodlad skådespelarinsats, utan en syntes av digitala och fysiska bidrag.

Sektörel Boyutlar

Sinema och animation

Med Hollywoods ökande roll för animation har prestandainspelning blivit vanligare; produktioner som , -serien eller är bland de främsta exemplen på denna teknik. Även om det akademiska arvets historiska tendens kopplas samman med uppfattningen om att MC-studier kan replikeras vid prisutdelningar, så bidrar sektorns tekniska framsteg till att denna attityd minskar.

Spelindustrin

Högkvalitativa spel har nu blivit stora arbetsgivare för prestationskonstnärer; en produktion som har inkluderat över 200 skådespelare i MC-processen. Detta har lett till att spelarcommunityt har antagit tekniken som en vanlig skådespelarapproach.

Klinisk och vetenskaplig tillämpning

Utöver den industriella användningen av rörelseinspelning finns det också kritiskt viktiga tillämpningar inom läkemedels- och vetenskapsvärlden:

• Gånganalys:
• Spor bilimi:
• Protes- och exoskelettkontroll:
• Virtualt/förfinnad verklighet (VR/AR):

I dessa områden ger MC ett datadrivet underlag för kliniska beslutsprocesser genom att möjliggöra objektiv och upprebar mätning av människans rörelser.

Akademisk utvärdering

Motion capture-teknologin är ett tvärvetenskapligt område som omdefinierar gränsen mellan skådespeleri och datorgrafik. Medan tekniska framsteg ökar noggrannheten (från optiska system till djupinlärning) pågår fortfarande konceptuella diskussioner: huruvida den slutliga produktionen ska räknas som “rent skådesperi”, hur aktörens författarskapsstatus ska definieras och hur prisutdelningars mekanismer ska värdera denna hybridform.

Akademiskt sett framträder MC som ett forskningsområde som befinner vid skärningspunkten mellan områden som signalbehandling, geometrisk triangulering, modellering av mänsklig rörelse och artificiell intelligens. Demokratiseringen av teknologin (billiga markerless-lösningar) har spritt tillverkningen inom detta område, men har samtidigt gjort det nödvändigt med pågående forskning gällande noggrannheten hos rörelsesdata och etisk användning.

Akademisk utvärdering och källförteckning

Utvärdering:

Källförteckning (representativ)

• Magnenat-Thalmann, N., & Thormann, D. L. (red.). . Springer.
• Wolley, J. M., et al. “Markerlös rörelseinsamling med konsoldjupkameror.” .
• Vicon / Qualisys systemhandledböcker — Tekniska dokumentation för optiska markeringsbaserade rörelseanalysplattformar.
• Screen Actors Guild (SAG) prestandaupptagningskommittens uttalanden och branschrapporteringar.
• University of Southern California, skolan för filmkonst, laboratoriepublikationer för digitala system.

Obs: Ovanstående källor är representativa referenser som valts för att återspegla ämnets akademiska ramverk; för exakta citat rekommenderas det att dessa verifieras mot aktuella artiklar i relevanta tidskrifter samt originalversioner av tillverkarens tekniska dokumentation.

Källnotering: Denna studie sammanställdes och uppdaterades i ett akademiskt tekniskt granskningsformat baserat på arkiverad dokumentation från https://www.wired.com/2012/01/andy-serkis-oscars/.