La storia dell'invecchiamento e del de-invecchiamento sullo schermo

La questione dell'invecchiamento e del de-aging sullo schermo è sempre stata una sfida per i registi. Dopotutto, il cinema significa portare le storie sullo schermo e quando la tua storia si svolge per un lungo periodo di tempo, dall'infanzia alla vecchiaia, una delle maggiori sfide è come mostrare l'invecchiamento dell'attore in modo realistico.

Molti registi hanno provato diversi metodi per risolvere questo problema nel corso degli anni e in questo post ne discuteremo alcuni. Dai primi giorni del cinema, quando usavano il trucco fino a quando cambiavano gli attori in motion capture e, più recentemente, alla tecnologia di cattura della luce che Martin Scorsese ha utilizzato nel suo film epico del 2019 The Irishman, parleremo della storia dell'invecchiamento e de-aging sul grande schermo.

Alla fine, parleremo di come puoi creare il tuo effetto antietà utilizzando FaceApp, EBsynth e After Effects come abbiamo fatto nel nostro ultimo spot.

Ecco uno degli spot:

Ora torniamo indietro nel tempo.

La tecnica di Karl Struss

La figura chiave in questo campo agli albori del cinema è stato il fotografo americano diventato direttore della fotografia Karl Struss. Durante le riprese dell'epopea muto di avventura del 1925 Ben Hur:A Tale of the Christ, Struss sviluppò una tecnica per mostrare la trasformazione del volto nel film. Ha applicato il trucco rosso per creare piaghe sui personaggi e ha utilizzato un filtro rosso sulla fotocamera per farli scomparire.

Puoi vedere un altro eccellente esempio della tecnica di Karl Struss nella commedia-mistero del 1937 Sh! Il polpo.

De-aging CGI

Avanti veloce fino a X-Men:The Last Stand del 2006, dove è stato utilizzato il primo effetto di de-invecchiamento CGI. La scena di apertura del film mostra il Professor X e Magneto, 20 anni più giovane, in visita a Jean Grey da bambino. Per ridurre l'età di Patrick Stewart e Ian McKellen, gli esperti di effetti visivi hanno utilizzato il famoso programma per computer Lola VFX per creare una procedura 2D simile a Photoshop sulle foto dei loro sé più giovani.

La tecnologia era ancora agli inizi e si vedeva.

Benjamin Button e i limiti del motion capture

La successiva svolta nella visualizzazione al computer è avvenuta nel film vincitore dell'Oscar di David Fincher, Il curioso caso di Benjamin Button, del 2008. La storia segue il personaggio intitolato, interpretato da Brad Pitt, che soffre di una condizione in cui è nato vecchio e il suo corpo invecchia mentre invecchia.

La prima ora del film presenta solo un Brad Pitt generato dal computer dal collo in su attaccato al corpo di diversi attori che indossavano cappucci blu (ne parleremo più avanti). Non sono stati utilizzati trucchi o fotografie sovrapposte.

Il team VFX di Digital Domain ha dovuto affrontare tre sfide principali:una era far sembrare Brad Pitt più vecchio; il secondo era quello di mostrare tutte le piccole sottigliezze e le caratteristiche speciali del suo viso, e il terzo era di tenere in piedi dei granelli del suo viso in tutte le condizioni, tipi di inquadrature ed espressioni, sia che fosse in pieno giorno, illuminato di notte a lume di candela, sia parla, corre, piange... qualsiasi cosa.

Per risolvere il problema della digitalizzazione del volto di Brad Pitt, Digital Domain ha basato il proprio processo sul Facial Action Coding System (FACS) del Dr. Paul Ekman, uno studio dei primi anni '70 che divideva il volto umano in 70 pose o forme di base, che possono essere combinate per creare infinite possibilità di tutto ciò che il volto umano è capace di fare.

Mova Contorno

Il team ha utilizzato l'innovativo sistema di telecamere Mova Contour, che è costruito come una stanza a tenuta di luce con due array di telecamere sincronizzate che registrano simultaneamente l'aspetto e la forma di un viso utilizzando un trucco fluorescente anziché marcatori di motion capture.

Seduto nel Mova Contour. Brad Pitt ha eseguito tutte le pose del viso di Ekman, fornendo a Digital Domain un database 3D di tutto ciò che il suo viso era in grado di fare.

Per creare il volto di Brad in epoche diverse, il team ha utilizzato maquette realizzate dallo scultore iperrealista Kazu Hiro, che hanno scansionato a una risoluzione molto alta e un enorme conteggio poligonale. Questo ha dato loro tre livelli di età di Benjamin computerizzato e hanno "riorientato" i dati che avevano da tutte le pose che Brad, 44 anni, ha fatto ai tre busti di Brad.

Per la prima ora del film, hanno girato le scene con attori del corpo che indossavano cappucci blu e marcatori di tracciamento sulla testa per ricreare il movimento della telecamera dell'ottica dell'obiettivo dal set.

Brad è stato quindi portato sul palcoscenico, ha guardato le scene più e più volte per immergersi nel film e ha recitato in base alle immagini che vedeva.

La fase successiva è stata un processo chiamato analisi delle immagini, che consiste nel trasporre i dati che avevano su Ben, 87 anni, e quindi abbinarli al filmato della performance di Brad in live-action.

Per superare la sfida dell'illuminazione, hanno costruito un sistema di illuminazione in cui l'illuminazione del viso di Brad corrispondeva all'illuminazione di ogni singolo luogo in cui appariva Benjamin.

Il livello di dettaglio della produzione di Benjamin Button è stato davvero sbalorditivo e il team è stato premiato con 3 premi Oscar per la direzione artistica, il trucco e gli effetti visivi.

Uomo Gemelli

Il picco della tecnologia di motion capture è probabilmente arrivato nel 2018 con Gemini Man di Ang Lee con Will Smith. Nel film, hanno creato una versione più giovane di Smith di 23 anni utilizzando un mix di filmati di lui dal suo Fresh Prince e Men in Black days. Come per Benjamin Button, il team degli effetti visivi ha preparato un database delle espressioni facciali di Will Smith che hanno ripreso in una stanza a tenuta di luce con due serie di telecamere.

Hanno anche fatto interpretare a Smith se stesso su un set del mondo reale e 6 mesi dopo lo hanno fatto interpretare il suo io più giovane su un palco di motion capture. La produzione di questo film ha anche mostrato che, con tutta la sua raffinatezza, il motion capture era ancora limitato nella sua capacità di catturare tutta la profondità e la ricchezza del comportamento umano. Ecco perché gli animatori hanno studiato le espressioni di Smith fotogramma per fotogramma, battito per battito e le hanno trasferite manualmente su Will Junior.

De-aging a base di luce e texture

L'ultima svolta nel de-invecchiamento è arrivata da una fonte inaspettata. Se chiedi alle persone cosa viene in mente quando sentono il nome Martin Scorsese, nessuno risponderebbe agli effetti visivi e, in circostanze diverse, il direttore di Taxi Driver e Quei bravi ragazzi probabilmente non sarebbero diventati il ​​catalizzatore che ha portato a questa innovazione tecnologica.

Il leggendario regista desiderava da molto tempo girare The Irishman, un'epopea gangster che racconta le storie del sicario Frank Sheeran, del leader dei teamster Jimmy Hoffa e del boss del crimine di Philly Russell Bufalino da oltre 51 anni, con Robert De Niro, Al Pacino e Joe Pesci, rispettivamente.

Quando il progetto ha finalmente ottenuto il via libera, il suo trio di attori era troppo vecchio per interpretare le versioni più giovani dei loro personaggi. Con le tecnologie esistenti. Scorsese ha dovuto affrontare due scelte:utilizzare attori diversi nel film o utilizzare indicatori di motion capture sui volti degli attori.

Obiettando a entrambe le opzioni, Scorsese si è rivolto al supervisore degli effetti visivi Pablo Helman, con il quale all'epoca stava lavorando a Silenzio, che ha promesso di ottenere l'effetto antietà senza usare "palline da golf" sui volti degli attori.

Flusso

Per costruire i modelli computerizzati 3D più accurati degli attori, il team di ILM VFX ha costruito uno speciale rig per la telecamera, soprannominato il mostro a tre teste, che aveva due mini telecamere ARRI per testimoni sui lati della telecamera principale di produzione RED Helium. Queste due fotocamere laterali erano dotate di filtri a infrarossi per ottenere riprese del viso illuminate in modo uniforme.

Hanno esaminato le espressioni FACS su un palcoscenico luminoso e hanno utilizzato un sistema chiamato "Medusa" per generare diversi modelli di volti che potevano spostarsi da un'espressione facciale all'altra.

La grande svolta è stata il software Flux, che invece dell'animazione, analizza ogni scena in base alla luce e alla trama e crea un modello 3D del viso dell'attore.

Il sistema Flux riorienterebbe quindi il modello più giovane sulla testa dell'attore contemporaneo utilizzando la stessa tecnologia di luce e texture.

Per ottenere i volti più credibili, è stato creato un Face Finder basato sull'intelligenza artificiale, da migliaia di screenshot degli attori dei loro film in tutte le fasi delle loro illustri carriere. Questo database è servito come riferimento visivo per vedere quanto fosse autentico il modello creato da Flux.

Il team VFX di ILM è stato nominato per un Academy Award

L'effetto invecchiamento con FaceApp

Ora vedremo come creare l'effetto di invecchiamento e de-invecchiamento senza spendere milioni di dollari e ottenere risultati impressionanti.

Come accennato, nel nostro ultimo spot ci siamo affidati alla tecnologia di FaceApp, che, se non hai prestato attenzione, è un'app di editing di foto (e presto video) che può farti sembrare più vecchio, più giovane, cambiare sesso e divertirti di più roba. Per completare la trasformazione dei nostri attori, abbiamo riproposto uno strumento progettato per trasformare i dipinti in animazioni video, chiamato EBsynth e completato con After Effects.

Se vuoi saperne di più sulla produzione di questo annuncio, guarda il nostro video dietro le quinte.

Tutorial per creare l'effetto invecchiamento

Passiamo ora all'effetto invecchiamento. Il flusso di lavoro includeva la scelta di un fotogramma dal nostro filmato originale e l'utilizzo di FaceApp per invecchiare il nostro attore. Quindi abbiamo preso quel singolo fotogramma in EBsynth e lo abbiamo usato come fotogramma di riferimento per tutti gli altri fotogrammi nel nostro video. EBsynth abbina e posiziona automaticamente l'effetto in ogni fotogramma individualmente e fornisce una sequenza completa in cui viene applicato l'effetto di invecchiamento.

Analizziamo ancora di più il processo. Devi aprire After Effects e importare il filmato. Quindi, devi creare una nuova compilation da quel metraggio ed esportarla come una sequenza di JPEG. Assicurati che tutto sia organizzato creando cartelle diverse per il tuo metraggio e premi il rendering.

Quello che hai ora è il tuo filmato esportato come singoli fotogrammi JPEG. Scegli una cornice, preferibilmente quella con il maggior numero di dettagli del viso del soggetto, e scaricala sul telefono. Aprilo con FaceApp e applica il filtro di invecchiamento (o qualsiasi altro effetto che hanno). Sebbene il filtro dell'invecchiamento di FaceApp sia piuttosto impressionante, la tecnologia (ancora) funziona solo sulle foto, quindi hai solo un fotogramma del tuo video in cui il soggetto è più vecchio.

Salva l'immagine sul telefono e trasferiscila di nuovo sul computer e, se lo desideri, modifica o migliora l'effetto di invecchiamento su Photoshop.

EBSynth

Assegna all'immagine lo stesso nome della cornice originale e apri EBsynth. Fai clic su Seleziona e scegli il primo fotogramma della sequenza JPEG.

EBsynth riconoscerà automaticamente la directory del progetto. Ora devi importare il tuo fotogramma chiave, che è l'immagine del tuo soggetto anziano creato con Faceapp, fai clic su Seleziona e scegli quel fotogramma.

Ora devi dire a EBsynth dove l'effetto dovrebbe iniziare e finire in base ai numeri di frame della nostra sequenza. Immettere il numero del primo fotogramma chiave in cui si verifica l'effetto a sinistra e il numero dell'ultimo fotogramma a destra. Nel mezzo, inserisci il numero di frame che hai usato su FaceApp. Per ottenere un effetto più uniforme, fai clic su "Avanzate" e inserisci un valore di circa 1,5 nella sezione Anti-sfarfallio.

Quindi fai clic su Seleziona e scegli la cartella in cui desideri esportare l'effetto. Fai clic su "Esegui tutto" e lascia che il software faccia la sua magia. Tieni presente che ciò potrebbe richiedere del tempo.

Al termine, importa la nuova sequenza in After Effects e allinea il metraggio originale con il nuovo metraggio. Basta animare l'opacità del filmato e il gioco è fatto.

Ecco alcuni suggerimenti per professionisti che ti aiuteranno a ottenere risultati ancora migliori. Maschera gli occhi e la bocca, che sono aree con cui il software a volte ha problemi, e aggiungi nitidezza e grana per fondere ancora di più l'effetto con il filmato originale. E per una transizione più fluida, crea una transizione Luma Key utilizzando l'effetto livelli in "Animate It".

In alternativa, puoi utilizzare la funzione di effetti video FaceApp appena lanciata.

Questa è una conclusione

Come con ogni nuova tecnologia rivoluzionaria, il de-invecchiamento presenta alcuni dilemmi filosofici e morali, ma sono fuori dallo scopo di questo post. Spero che tu abbia trovato informazioni e suggerimenti utili per il tuo prossimo progetto video. Alla prossima volta, resta creativo!