In questo tutorial, sto testando uno strumento che pretende di far svanire magicamente gli oggetti con il semplice tratto di un pennello.
Dove vanno questi oggetti, chiedi? Bene, sono dipinti. È un processo chiamato Inpainting , e c'è uno strumento creato per questa tecnica specifica da un'azienda chiamata RunwayML.
Il ML nel nome dell'azienda sta per Machine Learning , un tipo di intelligenza artificiale. Questo è ciò che rende la parte "magica" di questo strumento magico.
Sembra troppo bello per essere vero? Resta sintonizzato perché oggi metto alla prova Inpainting per vedere come regge.
Perché rimuovere oggetti?
Ma aspetta, qui sto superando me stesso.
Innanzitutto, quali sono questi oggetti e perché è necessario rimuoverli? Se sei un videografo, un editor o un artista di effetti visivi, hai un sacco di oggetti e motivi per volerli sparire.
Ad esempio, se sei mai uscito per girare B-roll, sai quante piccole cose possono rovinare uno scatto. I videografi devono comporre le loro riprese attorno a linee elettriche, pali della luce, edifici e alberi. Devono preoccuparsi del ragazzo che gira sullo sfondo con il suo tosaerba. E poi c'è il pedone curioso che non riesce a distogliere lo sguardo dalla telecamera e sembra sempre uscire dall'inquadratura.
Gli artisti VFX rimuovono, spostano e dipingono costantemente su tutto lo schermo per creare compositi complessi. Gli editori occasionalmente devono rimuovere i loghi dagli edifici e le magliette dei soggetti delle interviste. A volte, è per mettere qualcuno sulla luna. Altre volte, è per creare una base pulita.
Ma cosa succede se si desidera eseguire queste stesse attività, ma non si ha accesso alle applicazioni software o alle competenze possedute da questi artisti?
Come rimuovere oggetti con Inpainting
Runway sta creando strumenti per semplificare queste tecniche, aprendo un mondo di creatività a chiunque desideri creare. Inpainting è l'ultimo strumento di questo team e, nel momento in cui scrivo, è ancora in versione beta.
È un programma basato su browser, quindi non preoccuparti di dover acquistare e imparare alcune app software complesse. L'interfaccia utente è incredibilmente intuitiva. La rimozione degli oggetti è un semplice processo in tre fasi.
Passaggio 1:importa la tua clip
Utilizza il pulsante di caricamento in alto a sinistra dell'interfaccia utente o trascina e rilascia una clip da caricare.
Fase 2:dipingi sugli oggetti
Usa lo strumento pennello per dipingere sopra gli oggetti nella cornice. Un fotogramma chiave viene aggiunto alla posizione corrente della testina di riproduzione quando si utilizza lo strumento pennello.
Vedrai tre parametri di base sul lato destro dello schermo. Questi includono tipo di pennello , dimensione e modalità di visualizzazione . Ho trovato la Modalità di visualizzazione maschera essere buggy e non rappresentativo della maschera reale.
Fase 3:esporta
Dopo aver fatto clic su Esporta Inpainting pulsante in alto a destra, la clip viene inviata alla pagina Risorse per l'elaborazione. Una volta generato, puoi scaricarlo o aggiungerlo a un progetto nell'editor video nativo di Runway.
Rimozione di oggetti
Per prima cosa sono andato a Parigi per testare correttamente l'applicazione e ho girato una manciata di videoclip. Ho catturato varie scene e scenari in cui gli oggetti dovevano essere rimossi.
Ho fotografato graffiti su muri di mattoni, alberi vicino alla Torre Eiffel, bidoni della spazzatura, sedie e gruppi di turisti. Guarda il video tutorial corrispondente per vedere tutti i campioni prima e dopo nella loro piena gloria video.
*Disclaimer:durante il test, ho applicato di proposito un solo fotogramma chiave alla maggior parte degli esempi per vedere come si sarebbe propagato l'Inpainting attraverso la clip.
Graffiti su un muro di mattoni
Sono rimasto incredibilmente colpito dal modo in cui Inpainting è stato in grado di abbinare il modello dei mattoni. Tuttavia, il movimento era piuttosto instabile ed erano visibili anche vari spigoli vivi.
Lo scooter
Questo è stato probabilmente l'esempio di maggior successo, con pochissimo rumore visivo e movimento dopo che lo scooter è stato verniciato. Se non stavi prestando attenzione, probabilmente non noterai il piccolo problema tecnico nel rendering finale.
L'albero della Torre Eiffel
Questa clip è iniziata con un bell'aspetto ma alla fine è andata rapidamente in pezzi, con una parte dell'albero di nuovo visibile. Ho passato un po' di tempo ad aggiungere fotogrammi chiave e a giocherellare con la maschera, ma l'esperienza è stata piuttosto goffa e non sono riuscito a ottenere risultati perfetti.
Tuttavia, risultati impressionanti.
I turisti e le sedie
Avevo basse aspettative per questo pezzo, dato che il gruppo di turisti cammina in uno sfondo frenetico. Ma ancora una volta, se aggiungi una falsa profondità di campo, questo scatto potrebbe funzionare.
Le sedie sono state rapidamente rimosse, ma il gruppo ha lasciato dietro di sé alcuni spigoli vivi, ombre che spuntavano attraverso e alcuni alberi contorti.
Portare via la spazzatura
Questo è stato uno scatto semplice ma ha comunque avuto alcuni problemi quando il piede del turista è andato dietro la spazzatura.
Pro e contro
Inpainting è un'applicazione divertente, eccitante e potente. Ancora una volta, la modalità di visualizzazione Maschera era un po' difettosa per me, spesso non rifletteva i risultati effettivi della maschera. Ho anche faticato a fare perfezionamenti.
La regolazione della maschera su un secondo fotogramma chiave eliminerebbe la maschera su altre parti della timeline. Poi di nuovo, quando si tenta di visualizzare la maschera, non ha mostrato risultati corretti.
Questo è l'ideale per il creatore di contenuti del guerriero del fine settimana che cerca di creare video divertenti. Con questo strumento, puoi farla franca con alcuni colpi VFX divertenti e dall'aspetto realistico. Può essere raggiunto, ma è incostante e, quindi, inaffidabile sotto questo aspetto.
Se stai cercando bordi e risultati assolutamente perfetti ogni volta, non è ancora del tutto lì. Ancora una volta, al momento della stesura di questo articolo, è ancora in versione beta (puoi registrarti per una versione di prova qui).
Assicurati di dare un'occhiata al video e fammi sapere cosa ne pensi nella sezione commenti. Resta sintonizzato e iscriviti al canale YT, poiché il mese prossimo esaminerò un altro strumento di Runway incentrato su sottotitoli e didascalie generati dall'IA.
Alcuni altri strumenti per la tua cassetta degli attrezzi:
- Oltre 280 effetti sonori gratuiti per video, app, film e giochi
- Omaggio Color Grading:oltre 65 look Premiere Pro gratuiti
- Il miglior sito per scaricare modelli 3D per Blender, Cinema 4D e altro
- Come realizzare uno studio di voiceover portatile senza computer
- Il miglior equipaggiamento per creare il tuo prossimo video TikTok