Brainstorm approfondisce le applicazioni AI, ML e Big Data nel progetto EMERALD

Brainstorming sta partecipando al Progetto Europeo SMERALDO “Process Automation and AI for Entertainment and Sustainable Media”, finanziato dalla Commissione Europea nell’ambito del Programma Horizon Europe.

Il consorzio interdisciplinare di sette partner comprende, oltre a Brainstorm, aziende leader nei settori delle tecnologie cinematografiche, broadcast, streaming e intrattenimento dal vivo (BBC, Sistemi di travestimento, Filmlight e MOG Technologies), supportato da due importanti università europee (Universidad Pompeu Fabra y The Provost, Fellows, Foundation Scholars & The Other Members Of Board Of The College Of The Holy & Undivided Trinity Of Queen Elizabeth Near Dublin).

Francisco Ibanez, project manager di ricerca e sviluppo presso Brainstorm, sottolinea che “EMERALD si impegna a creare strumenti innovativi per i settori dell'intrattenimento digitale e dei media, sfruttando il potenziale dell'intelligenza artificiale, dell'apprendimento automatico e delle tecnologie Big Data. L’obiettivo generale è rivoluzionare la lavorazione, migliorare l’efficienza produttiva, ridurre al minimo il consumo energetico ed elevare la qualità dei contenuti attraverso innovazioni all’avanguardia”.

“Attualmente si registra un massiccio aumento del volume di contenuti basati su video e di realtà estesa, con una domanda insostenibile di risorse umane qualificate, elaborazione dati ed energia. «Questo progetto mira ad affrontare questa sfida sviluppando l’automazione dei processi per la creazione di media sostenibili», aggiunge.

EMERALD mira ad applicare l’apprendimento automatico per automatizzare alcune delle attività più laboriose nella produzione di contenuti video, che hanno notevoli implicazioni sia in termini di tempo che di consumo energetico.

Javier Montesa, coordinatore tecnico della ricerca e sviluppo presso Brainstorm, afferma che Brainstorm, in collaborazione con l'Università Pompeu Fabra (UPF), svilupperà metodi e strumenti basati sull'apprendimento profondo per i video matting. “L’obiettivo principale è produrre risultati di alta qualità per l’integrazione automatica in tempo reale di presentatori o artisti remoti in scene e set virtuali per la trasmissione e lo streaming multimediale utilizzando il deep learning senza la necessità di una “trimap”. Con il miglioramento dell’intelligenza artificiale di InfinitySet di BRA, porteremo la qualità dei metodi dello schermo verde a impostazioni più semplici”, afferma.

Montesa spiega che Brainstorm ha in programma di farlo integrare InfinitySet con i sistemi di deep learning UPF per la stima della posa della testa e del corpo che consentirà all'operatore di attivare il contenuto da visualizzare automaticamente su diverse parti della scena, schermi virtuali, segnaposto di grafica 3D o semplicemente davanti al presentatore mentre si muove. Ibáñez aggiunge che “verranno esplorati nuovi modi per migliorare l’inserimento del presentatore, cambiare la sua silhouette e calcolare la sua ombra con maggiore precisione e realismo”.

Inoltre, Brainstorm parteciperà alla creazione di strumenti progettati per il Bilanciamento automatico dei colori e corrispondenza delle riprese. Le manipolazioni del colore sono necessarie in post-produzione, nelle produzioni virtuali e negli studi di trasmissione virtuali.

Javier Montesa afferma che automatizzare la classificazione del colore del presentatore per adattarla alla scena virtuale sarà particolarmente utile per gli studi di trasmissione virtuali che non dispongono di coloristi. "L'integrazione di questa correzione automatica del colore in InfinitySet semplificherà l'uso dello strumento e migliorerà l'integrazione del presentatore-scena quando le condizioni di illuminazione non sono controllate o quando le condizioni di illuminazione della scena virtuale sono destinate a variare durante un programma" .

Altri articoli su BBC, Brainstorming, Travestimento, Luce cinematografica, MOG, UPF