Vai dietro le quinte con PremiumBeat mentre parliamo con Jonathan Winbush della sua collaborazione artistica con il DJ Mix Master Mike.
PremiumBeat ha recentemente avuto la possibilità di parlare con l'artista di grafica animata Jonathan Winbush e di andare dietro le quinte del suo ultimo progetto di cripto arte, che è una collaborazione di video musicali con il DJ Mix Master Mike. Il progetto si intitola Ricetta Mob e coinvolge tutto, dalla scansione 3D di tutto il corpo al motion capture, alla costruzione di un set virtuale in Cinema 4D e quindi al conio di tutto come NFT. Per dare un'occhiata alla Ricetta Mob nella sua interezza, visita la pagina SuperRare di Jonathan.
PremiumBeat: Prima di addentrarci nella creazione di Ricetta Mob , puoi informare tutti su qual è il progetto e la motivazione dell'idea?
Jonathan Winbush: Sì, quindi ho fatto arte crittografica per alcuni mesi ormai, solo per bagnarmi le dita dei piedi, e ho fatto molti progetti con Mix Master Mike in passato. Dopo aver parlato con lui di quello che stavo facendo nello spazio NFT, ha detto:"Dovremmo effettivamente mettere insieme un album di criptovalute NFT, con l'audio e le immagini insieme". Quindi, quello che sto facendo in questo momento è che sto lavorando al primo singolo con Mix Master Mike, lo metteremo su SuperRare e sarà come un video musicale di trenta o quarantacinque secondi con uno dei clip del suo nuovo album in uscita.
PB: Sono sicuro che molte persone sono interessate, come artista di motion graphics, come sei entrato in contatto con Mix Master Mike e hai iniziato a fare queste collaborazioni?
JW: Abbastanza divertente, è iniziato nel lontano 2015-16, quando ho iniziato a entrare nella realtà virtuale. Stavo facendo un sacco di ricerca e sviluppo, scherzando con cose 360 VR. All'epoca avevamo un amico in comune, Tony Washington, stava facendo molto del lavoro di illustrazione di Mike perché Mike stava uscendo con un fumetto in quel momento. Tony ci ha effettivamente presentato. Mike è sempre stato lungimirante e ama sempre dilettarsi con le nuove tecnologie. E voleva pubblicare un video musicale, ma niente di tradizionale. Tony gli ha detto a cosa stavo lavorando in 360 VR, quindi è stato un po' schiacciato insieme. Gli ho inviato una presentazione di alcune cose su cui stavo lavorando e il resto è storia da lì.
PB: Una delle immagini che hai condiviso era una foto di Mike in una stanza piena di macchine fotografiche. Presumo che sia per la scansione 3D. Puoi darci un'idea in merito?
JW: Sì, l'immagine di cui stai parlando è di questa azienda chiamata The Scan Truck. Un paio di anni fa, hanno escogitato questo concetto. Molte volte quando vuoi scansionare oggetti o persone in 3D, devi andare in un palcoscenico costruito appositamente. E questi ragazzi hanno effettivamente costruito quel palcoscenico all'interno di un camion mobile. Lo chiamano "The Scan Truck" perché possono portarlo ovunque. Si trovano qui nel sud della California, ma possono guidarlo ovunque, se stai girando un film o se stai lavorando a un videogioco.
Gli attori saliranno al camion, riceveranno una scansione 3D completa, in modo che tutto sia fotoreale. Stanno ottenendo una replica 3D esatta di chiunque stiano scansionando. Quindi, prendono quel modello 3D e lo usano per gli effetti visivi nei film o nei videogiochi. Nel nostro caso, li stavamo aiutando a testarlo e siamo stati i primi ad entrare e fare un lavoro di fotogrammetria. Ci hanno dato una scansione 3D di Mike e di me, e sono un sacco di cose che puoi vedere lì.
PB: Dopo la scansione, quanta pulizia è stata necessaria per il modello 3D?
JW: Ognuna di queste telecamere prende una diversa angolazione di Mike e si sovrappone leggermente, in modo da ottenere la massima risoluzione possibile dell'immagine. Non ricordo subito le specifiche, ma il modello è tornato estremamente pesante. Quindi, devi decimare alcuni dei poligoni e smussarlo, solo così è praticabile. L'ho fatto usando Cinema 4D. E fondamentalmente, sto usando solo il modello della testa dalla sua scansione, perché in realtà ho costruito il suo corpo come un personaggio cibernetico.
Le sue braccia sono completamente meccaniche e hanno dei fili che pendono da esse. Stavo prendendo ispirazione dalle persone che praticano il bio-hacking. In realtà prenderanno dei microchip e li metteranno nella loro pelle:stanno cercando di trasformarsi in cyborg e fare in modo che il loro corpo controlli diverse cose meccaniche, e cose del genere. Quindi, ho pensato che fosse bello per un po' di ispirazione, l'unica parte che è effettivamente umana è la sua parte superiore, dal collo in su. Quindi, questa è la parte della fotogrammetria che stiamo usando e il resto del suo corpo è completamente modellato in 3D.
PB: E poi, per l'animazione, presumo che sia qui che entra in gioco la tuta per il motion capture?
JW: Sì, per il motion capture, in realtà sto usando la tuta Rokoko, che è una soluzione di motion capture economica per artisti indipendenti. Sono sicuro che hai visto il dietro le quinte delle persone con gli abiti in spandex, e hanno tutte quelle palle addosso, e stanno correndo intorno al palcoscenico. Ora, nel 2021, possiamo effettivamente avere quelle capacità che possiamo fare semplicemente a casa nostra.
La tuta Rokoko può effettivamente funzionare tramite Wi-Fi o Bluetooth e ha tutti i sensori all'interno di una tuta da ginnastica. Quindi, sono stato in grado di portare la mia tuta nello studio di Mike e lui l'ha indossata e ha fatto un'esibizione completa. In questo modo, sono stato effettivamente in grado di catturare tutta la sua essenza, tutti i movimenti delle sue mani e i movimenti del suo corpo. E poi, esporta tutto in un file FBX, che potrei effettivamente trasferire e allegare a un modello.
(Se vuoi saperne di più sulla tuta di motion capture Rokoko usata da Jonathan, dai un'occhiata al post di Todd su Come iniziare con Motion Capture.)
PB: Dopo aver ottenuto i movimenti della tuta, quanto è difficile montarli sul modello 3D?
JW: Faccio molti tutorial su diverse tecniche che ho escogitato, come l'utilizzo del motion capture con Adobe Mixamo e Cinema 4D Character Definition. Quindi, sono già un po' abituato a quello che stavo per fare. E, per questo particolare progetto, ho preso i dati di motion capture di Mike, ho fatto un po' di pulizia in Rokoko Studio, e poi ho esportato semplicemente da FBX, che sto usando Mixamo per truccare il modello 3D.
Se hai un modello e una posa a T, puoi effettivamente caricarlo su Adobe Mixamo. E poi, farò un auto rig in cui inserisce automaticamente uno scheletro sul modello. Quindi, puoi portarlo in Cinema 4D e allineare le articolazioni e tutto il resto. Ho un tutorial su questo in realtà. Il processo dura da dieci a quindici minuti e non è affatto difficile.
PB: Qual è stata l'ispirazione e il processo per costruire il futuristico DJ set in Cinema 4D?
JW: Per questo particolare progetto, volevo che anche l'ambiente avesse una storia da raccontare insieme a Mike. Quindi, ho scavato un po' e mi è piaciuto quel Blade Runner tipo di ambiente:futuristico, ma comunque familiare. Quindi, il tipo di posto in cui l'ho messo era forse come un museo a un certo punto, ma non è stato abitato per cento anni. Quindi, è un po' decrepito. Forse alcune persone sono entrate e l'hanno saccheggiato, e poi ora è un covo per i biohacker in cui entrare e fare i loro esperimenti.
Ha un po' di familiarità, ma dal momento che è così lontano nel futuro e logoro, è un po' dimenticato. Ho pensato che sarebbe stato un ambiente interessante in cui inserire questo Mike bio-ingegnerizzato. Una zona di cui nessuno sa esattamente dove si trovi. Quindi, ho renderizzato otto diverse angolazioni della telecamera. Alcuni angoli sembrano telecamere di sorveglianza, come se fosse quasi spiato nella sua tana segreta. Mi occupo di tecnologia futura, e anche Mike. Ecco perché pensavo:"Dovremmo fare qualcosa di veramente interessante, ma non diventare completamente cyber-punk", perché è andata così.
(Vuoi saperne di più su Cinema 4D? Dai un'occhiata ai suggerimenti di PremiumBeat per l'apprendimento di Cinema 4D.)
PB: Puoi spiegare meglio cos'è Unreal Engine e come funziona con Cinema 4D?
JW: Per questo particolare progetto, ho esaminato la mentalità di come si sarebbe comportato un programmatore di giochi o uno sviluppatore di giochi. Molte volte, quello che fanno è chiamato "pugilato grigio". Aumenteranno il loro livello in Maya o, nel mio caso, in Cinema 4D. Ed è tutta solo geometria, niente texture o altro. Stai solo per ottenere un layout per come vuoi che siano le tue strutture. Ho questa struttura costruita all'interno di Cinema 4D e da lì la esporto su Unreal Engine, perché ho molti strumenti lì, come la libreria Megascans, che è un sacco di trame e geometrie fotogrammetriche diverse. E poi, anche l'Unreal Engine Marketplace ha un sacco di cose interessanti.
Quello che mi piacerebbe fare è inserire la geometria grezza in Unreal Engine, e da lì, posso creare dei dettagli davvero fini. Eseguo la pittura con fusione di vertici dove posso effettivamente dipingere sulla geometria. Quindi, se ho un muro di mattoni e voglio dipingere in qualche sgretolamento, posso semplicemente dipingerlo. Posso anche semplicemente trascinare e rilasciare risorse da Megascan lì dentro. Sto facendo tutto questo in Unreal Engine perché è un motore di gioco e sono costruiti per funzionare in tempo reale, quindi non c'è bisogno di tempo per eseguire il rendering di nulla. Quello che vedi è quello che ottieni. Questo è il motivo principale per cui utilizzo Unreal Engine, per via della sua velocità e della sua flessibilità.
PB: Com'è il processo quando avvii un NFT come Ricetta Mob su SuperRare?
JW: Quindi, devi creare un file .MPEG e quello sarà un formato video che caricherai. Quindi, devi metterlo sulla blockchain ed è qui che entra in gioco SuperRare. Il mio particolare portafoglio si chiama portafoglio MetaMask, ed è quello che gestisce tutto il mio Ethereum e cose del genere. Quindi, sto usando un portafoglio MetaMask per prendere questo pezzo e tokenizzarlo sulla blockchain. Da lì, viene elencato su SuperRare e ciò consente a chiunque abbia Ethereum di fare un'offerta su SuperRare. Quindi, se hai un'offerta di cui sei soddisfatto, è allora che la accetti, e poi Ethereum torna al tuo portafoglio MetaMask, e questa è la tua transazione.
PB: Hai menzionato una versione remix, come funziona un remix con un progetto come questo?
JW: Sì, quindi la performance è esattamente la stessa, ma ho completamente re-renderizzato tutto. E la chiamiamo "la pillola rossa e la pillola blu", perché su quella originale, la GUI e l'interfaccia utente e tutto avevano queste sfumature rosse e l'ambiente è piuttosto caldo. Quindi, per il remix, ho ridisegnato tutto con una GUI simile al blu e le luci saranno un po' più fresche, ti darà un'atmosfera completamente diversa. Quindi, Mike è tornato indietro e ha effettivamente remixato l'intero audio. Quindi, l'audio scratching e tutto è lo stesso, ma ha aggiunto 808 tamburi e la linea di basso è completamente diversa e l'intro è diversa. Quindi, sarà quasi come una traccia completamente diversa.
Jonathan ha anche inviato alcune delle domande di PremiumBeat al DJ Mix Master Mike per conoscere la sua esperienza nella creazione di Mob Recipe .
PremiumBeat: Avresti mai immaginato di esibirti in una tuta per il motion capture e com'era?
Mix Master Mike: Cosa posso dire? Voglio dire, è come una partita fatta in paradiso per questa piattaforma. Dal mondo VR a questo mondo, abbiamo sempre avuto la possibilità di sbloccare tutte queste infinite possibilità di essere creativi all'interno di questa piattaforma. Con il motion capture, tutto è permesso:il limite è il cielo. Posso mostrare i miei graffi. Potrei mostrare al mondo cosa sono e com'è essere un artista d'azione. Questo è quello che sono, un artista d'azione. Come ho detto, questa è una partita fatta in paradiso.
PB: Qual è l'ispirazione per combinare la musica con le nuove tecnologie, come la realtà virtuale e gli NFT?
MMM: Con questa piattaforma, il mondo NFT, il mondo della realtà virtuale, è come la piattaforma definitiva per entrare effettivamente nella sensazione di cosa tratta la musica. L'emozione cruda, l'esecuzione della canzone. Ed è quello che manca quando ascolti roba simile su Spotify o solo musica in generale. Tu usi la tua immaginazione. Con questa cosa, non devi usare la tua immaginazione. Puoi vederlo e puoi sentirlo. Potresti sentirlo. Sei totalmente immerso nella canzone. Questa è la bellezza di queste piattaforme.
PB: Com'è stato collaborare con Jonathan su così tanti progetti?
MMM: Il bello tra me e la relazione di Jonathan è che ci piacciono le stesse cose. Veniamo da un background hardcore hip-hop. Dagli anni '80 agli anni '90, ad oggi. Abbiamo tutta quella conoscenza e tutta quella saggezza. Quindi, ora, usiamo tutta quella conoscenza, saggezza e quell'esperienza e la portiamo nel nuovo mondo e in qualche modo trasformiamo i millennial in esso. Insieme, stiamo trasformando i millennial in tutte le cose che ci piacciono. Stiamo ricreando ciò che abbiamo nella testa. Tutta questa roba è creata nelle nostre teste. Ne parliamo tutto il tempo. È solo che ora il mondo può finalmente vederlo e sperimentarlo. Tanto amore a Winbush.
Se vuoi saperne di più sui progetti di Jonathan e Mix Master Mike, dai un'occhiata a WINBUSH su YouTube e mixmastermike.com. Inoltre, dai un'occhiata al tour 360 VR del set di Ricetta Mob .
Ti interessano le tracce royalty-free che abbiamo utilizzato per realizzare questo video? Dagli un altro ascolto:
- "Hustlin'" di Harrison Amer
- "Late Night Latte" di Harrison Amer
- “Retro Chillhop” di Mattijs Muller
- “Constellation” di Chill Chord
- "Smooth Moves" di Reaktor Productions
- "Una domenica illuminata dal sole" di Vincent Tone