Realtà aumentata in soccorso. La cancellazione di NAB 2022-2023 a causa della pandemia COVID-19 ha causato onde d'urto in tutto il settore delle trasmissioni. Tenuto ogni anno a Las Vegas, NAB Show è la più grande fiera di trasmissione con oltre 90.000 partecipanti da oltre 160 paesi. La maggior parte dei 1.600 espositori lancia nuovi prodotti e tecnologie e per molte grandi aziende, vengono messi in atto fino a sei mesi di pianificazione. In un brevissimo lasso di tempo, il team di Panasonic Pro Video ha dovuto escogitare alternative per trasmettere il proprio messaggio mentre lavorava a distanza da casa.
Audio + Video + IT. I nostri redattori sono esperti nell'integrazione di audio, video e IT. Ottieni approfondimenti quotidiani, notizie e networking professionale. Abbonati a Pro AV oggi
Nei giorni precedenti l'annullamento del NAB Show, il team di Panasonic ha iniziato a esaminare le opzioni per realizzare un evento sostitutivo, inclusa l'idea di costruire uno stand fisico dove i clienti potessero visitare online. Il team di Panasonic Pro Video ha anche discusso con Paul Lacombe, CEO di DisruptAR con sede nel New England, specializzato nella creazione di produzioni virtuali. Avendo iniziato la sua carriera alla General Motors dopo il college, Lacombe ha lavorato nel settore della produzione per 30 anni iniziando da Silicon Graphics alla fine degli anni '80 prima di avventurarsi da solo per perseguire produzioni virtuali. DisruptAR si concentra sulla riduzione dei costi di produzione AR e VR per il mercato più ampio.
- Infrastruttura di streaming di Esports Training Factory
- Citizen Cope fa il suo debutto in uno spazio per concerti protetto da Covid
- Apprendimento remoto: come far funzionare un'orchestra remota
- Le migliori telecamere PTZ per lo streaming live
Il 16 marzo, il New Jersey, dove ha sede la sede centrale di Panasonic negli Stati Uniti, è stato ufficialmente bloccato; il 18 marzo, Lacombe ha programmato la prima demo per il team Panasonic. Il NAB Show 2022-2023 è stato cancellato il 20 marzo. "
Abbiamo dovuto decidere tra le due opzioni molto rapidamente ", rivela Harry Patel, responsabile tecnico di Panasonic. “La prima opzione richiedeva di costruire fisicamente uno stand, portare il prodotto seguendo i requisiti di allontanamento sociale (meno di 10 persone alla volta) e coinvolgere una troupe cinematografica. Non era pratico e volevamo fare qualcosa di qualità superiore, anche se non potevamo lasciare le nostre case. Quindi, finalmente, questa idea di un evento virtuale è stata ulteriormente discussa ed è stata approvata entro la fine di marzo ".
Realtà aumentata e produzione remota
La produzione remota non è un concetto nuovo. Il regista Francis Ford Coppola ha diretto e montato molte scene del suo film del 1982, One From the Heart, da un trailer vicino al set. Ma creare una produzione a distanza da casa durante una pandemia globale è un'altra storia. Era possibile solo utilizzando una tecnologia della fotocamera all'avanguardia, motori di gioco VR e app basate su cloud.
Per Panasonic, il primo obiettivo era creare un messaggio chiaro con comunicazioni verbali e scritte tradotte in un formato video più visivo. In NAB, i venditori normalmente comunicano con i clienti nello show floor discutendo soluzioni ai problemi di ogni persona. Il Marketing Group Manager Jim Wickizer e l'agenzia P.R., Racepoint Global, sono stati in grado di elaborare un messaggio coerente e hanno lavorato con i singoli product manager per presentare i giusti punti di discussione.
Patel e Wickizer hanno anche iniziato a lavorare con Lacombe a distanza dal suo studio di casa per creare interviste video tra i responsabili dei prodotti e una conduttrice dello studio, Zoe Laiz, che dovevano discutere di nuovi prodotti e tecnologie. "Abbiamo avuto tutti ambienti di produzione impegnativi, ma farlo da remoto con questa pianificazione, è stato sicuramente un atto di fede", spiega Lacombe. "Nel mio istinto, sapevo che poteva funzionare, ma non averlo mai fatto prima era una preoccupazione."
Per la registrazione remota, ogni responsabile del prodotto ha ricevuto un laptop, un microfono USB Blue Yeti e una videocamera PTZ professionale Full-HD AW-HE42 di Panasonic. L'HE42 è stato collegato tramite Ethernet e il driver USB virtuale PTZ e il video è stato portato nel laptop utilizzando OBS per la registrazione e TeamViewer per il controllo remoto.
Realtà aumentata e squadre di SM
Per la comunicazione, la condivisione di file, la visualizzazione di demo e il monitoraggio delle riprese di produzione in remoto, Panasonic ha utilizzato Microsoft Teams, una piattaforma di comunicazione e collaborazione. Durante la notte, piattaforme come Teams, Zoom, Ring Central e molte altre hanno permesso a persone e aziende di comunicare con il mondo esterno in sicurezza dalle loro case.
Per visualizzare ciò che Lacombe stava catturando sul set durante la produzione, Patel ha utilizzato la condivisione dello schermo di Teams creando una suddivisione quadrupla utilizzando un'uscita dello switcher AV-UHS500 su un convertitore da SDI a USB. Il feed USB è stato presentato in Windows come feed della fotocamera, che hanno condiviso tramite Teams.
Durante la supervisione della registrazione del discorso di apertura di John Baisley, Vicepresidente senior, Sistemi visivi e di imaging professionale, Patel e Wickizer sono stati in grado di vedere dal vivo il soggiorno di Baisley e fornire indicazioni sia che si trattasse di un errore di lettura della riga, di un problema di suono. Attraverso Teams, Patel è stata anche in grado di fornire la direzione dello schermo osservando sia lo schermo verde che le viste virtuali. "Se Zoey si trovava proprio dietro una porta ed entra, potremmo davvero vedere se la ripresa è stata buona o meno", spiega Patel. "Vorrei dire a Paul tramite Teams, 'Potrebbe funzionare meglio se si sposta un po' bene." In termini di collaborazione remota, non penso che sarebbe stato possibile senza l'uso di Teams. "
"È stato fantastico farlo da remoto", aggiunge Wickizer. “Avevamo una persona a Boston, Harry e io eravamo nelle nostre case nel New Jersey e avevamo un'altra persona sulla costa occidentale. Una volta mia figlia è venuta nel nostro seminterrato e mi ha chiesto cosa stessi facendo. 'Stiamo facendo una produzione a distanza', le ho detto. Non riusciva davvero a crederci. "
Free-D e Unreal Engine
Per incorporare realistici set da studio VR in una produzione dal vivo, è essenziale acquisire dati precisi sul posizionamento della telecamera. Prima di presentare la sua prima demo per Panasonic, DisruptAR ha sviluppato un driver Free-D che avrebbe consentito di collegare la telecamera PTZ AW-UE150 4K Pro direttamente all'Unreal Engine, che gli ha fornito la possibilità di produrre informazioni su Pan / Tilt / Zoom / Iris via IP (UDP) direttamente dalla telecamera al sistema di tracciamento di Unreal in tempo reale senza la necessità di sensori o codificatori aggiuntivi.
"Free-D è arrivato dalla BBC all'inizio degli anni '90 come protocollo di tracciamento per uno dei loro sistemi di tracciamento delle telecamere", spiega Lacombe. “Definisce i sei gradi di libertà: panoramica, inclinazione, rotazione, X, Y, Z, nonché campo visivo, zoom e messa a fuoco. Questi valori vengono inviati al motore di rendering virtuale e collegati a una telecamera virtuale in modo che lo sfondo risponda di conseguenza in tempo reale a 60 fotogrammi al secondo. "
Secondo Lacombe, l'Unreal Engine è stato utilizzato su tutta la linea in numerose produzioni, da The Lion King a The Mandalorian. "È la tecnologia di base utilizzata dalla maggior parte di Hollywood in questo momento", afferma Lacombe. "Lo stanno usando come proxy per la maggior parte, ma l'obiettivo è il 'pixel finale', che è ciò che vedi all'inizio in tempo reale è ciò che appare sullo schermo".
"L'Unreal Engine è un motore di gioco che è stato applicato in altri mercati, tra cui architettura, visualizzazione CAD e, in questo caso, trasmissione e film", afferma Lacombe. "Lo stiamo usando per raggiungere il più alto livello di fotorealismo, prendendo le risorse dagli strumenti DCC tradizionali come Maya, 3D Studio Max, Blender, utilizzando le schede grafiche NVIDIA a 60 fotogrammi al secondo, offrendo agli spettatori la fedeltà delle caratteristiche dell'obiettivo come fioritura, bagliori e sfocatura. La qualità di cui hai bisogno per ottenere il fotorealismo e il rendering a 60 fotogrammi al secondo è essenzialmente ciò che fa l'Unreal Engine. "
Creare un mondo virtuale … in un garage
Lo studio di Lacombe si trova nel suo garage convertito che misura solo 20 x 24 e la sua squadra era composta da un solo assistente. Per lo schermo verde, ha utilizzato uno sfondo Pro Cyc Portable. A causa dei limiti di spazio, Laiz poteva camminare solo pochi passi, quindi erano limitati sulle telecamere, rendendo l'AW-UE150 lo strumento perfetto per il lavoro. Per illuminare il suo schermo verde, Lacombe ha utilizzato pannelli LED da 14 pollici. "L'idea è che tu voglia davvero avere una tonalità di verde e sbarazzarti di tutte le macchie in modo che il tuo keyer possa mantenere quelle ombre", spiega Lacombe. "Scegli un verde che vuoi rendere trasparente e i verdi più scuri sono le ombre sovrapposte nel tuo set virtuale."
Anche se lavorava nei piccoli confini del suo garage, doveva accendere il suo talento con la luce motivata di un grande studio. Per illuminare Laiz, Lacombe ha utilizzato due pannelli LED sia per la sua chiave che per il riempimento. Ha anche usato alcuni faretti dall'alto per simulare una luce rossastra proveniente dalle finestre. "Fondamentalmente stiamo cercando di abbinare quella direzione e quella temperatura del colore senza influenzare lo schermo verde", rivela Lacombe. “È una sfida perché stai cercando di illuminare il talento separatamente dallo schermo verde. Le porte della stalla su quei LED ci davano più spazio, ma stavamo lottando per allontanarci dal green e ottenere un rimbalzo minimo dal green sui suoi vestiti e sulla sua pelle ".
Sul set, Lacombe ha utilizzato due fotocamere UE150: la fotocamera 1 era a sinistra e la fotocamera 2 a destra. Quando Zoe faceva il suo turno per affrontare un product manager visualizzato su un monitor verticale, passava alla telecamera due all'altezza degli occhi di Laiz per ottenere il punto di vista simulato del product manager. Abbinare gli occhi è una sfida, ma Lacombe dice che potrebbe imbrogliare un po 'sapendo dove si trovava la sua posizione di casa. “Se avessi due telecamere, una a 90 gradi rispetto all'altra a otto piedi di distanza e l'altra a quattro piedi di distanza, puoi misurare con un metro a nastro e metterle nel mondo virtuale nella stessa posizione. Si aderiranno l'un l'altro attraverso le leggi della fisica in modo che sembrino essere in quella posizione esatta. E poi puoi imbrogliare un po 'secondo queste linee guida ".
Design di produzione con un clic di un pulsante
Per il design del set virtuale, Lacombe ha utilizzato un design modificato con cui stava lavorando con un altro cliente l'anno scorso. Il design è stato realizzato in Maya ed esportato in Unreal. Dato che il set virtuale si svolge di notte, all'inizio avevano un aspetto più scuro, ma poi hanno deciso di renderlo un po 'più luminoso. Ha aggiunto il logo Panasonic e ha portato via elementi che non erano essenziali per il set Panasonic. Ha anche aggiunto un monitor che esce dal pavimento da cui Laiz esce da dietro.
Nella creazione del proprio set virtuale, secondo Lacombe, ci sono più risorse 3D disponibili poiché la visualizzazione architettonica online è davvero decollata. Puoi accedere a una libreria 3D e trovare risorse o modelli 3D e crearli in base ai tuoi requisiti di personalizzazione. "È davvero un avanti e indietro con il cliente", spiega Lacombe. "Aggiungi i tuoi componenti di marketing, il marchio, tutti i colori e i materiali. Una volta che hai la risorsa lì, puoi abbattere i muri con un pulsante, fare clic o spostare oggetti, regolare i monitor in tempo reale. Nel "mondo fisico", ciò richiederebbe una notevole quantità di tempo e denaro. Una volta che hai costruito l'oggetto, è facile regolarlo e tornare a ".
Mantenere una distanza di sicurezza
La produzione virtuale si è evoluta nel corso dei decenni attraverso l'esperienza e il perfezionamento. Sebbene i ruoli di una produzione fisica e di una produzione virtuale siano essenzialmente gli stessi, la differenza più grande è che tutti lavorano nello stesso spazio fisico. Una volta che l'ordinanza di soggiorno a casa è stata revocata, è ancora da stabilire se la vera produzione a distanza diventerà la norma.
"C'è un motivo per cui qualcuno guarda la chiave, qualcuno che guarda la sceneggiatura, qualcuno che guarda l'angolazione della telecamera e il guardaroba", dice Lacombe. Tutti questi ruoli devono ancora essere soddisfatti e stiamo solo cercando di capire il modo migliore per farlo da remoto. Finora ha funzionato sorprendentemente bene e siamo tutti sorpresi da come tutto questo si sia riunito così rapidamente e si sia evoluto in modo naturale. Anche se abbiamo dovuto indossare più cappelli di quanto avremmo voluto per questa produzione, il passo logico successivo è distribuirlo ancora di più per coinvolgere altri per perfezionare e migliorare il processo. Ma per la prima volta sono molto soddisfatto dei risultati e ansioso di passare alla fase successiva ".
Per guardare l'evento virtuale di Panasonic, Il futuro della produzione video , fare clic qui.
Per ulteriori informazioni su DisruptAR, visitare www.disruptar.com.