La cité lacustre suisse de Montreux accueillera une nouvelle fois son célèbre festival de jazz. Au cours des 50 dernières années, le festival a vu quelques-uns des plus grands actes de l’histoire de la musique, tels que Nina Simone, Ray Charles, Miles Davis, Prince et David Bowie, entre autres.
Cette année, audioborn a développé un projet permettant pour la première fois, de capturer le festival en vidéo et audio à 360°/3D. Le contenu pourra ensuite être utilisé dans des applications de réalité virtuelle, permettant aux utilisateurs de découvrir les actes sélectionnés avec la qualité de la vie réelle.
Commandée par le Centre Metamedia de l’Université École Polytechnique Fédérale de Lausanne (EPFL) en collaboration avec le Festival de Jazz de Montreux, le chef de projet et partenaire technologique officiel audioborn collabore avec PRG Lab sur le projet. audioborn est responsable de la capture et du rendu de tous les concerts en audio 3D avec son processeur en temps réel appelé Auratorium. Le logiciel est conçu pour les applications audio 3D et les applications de réalité virtuelle. Il utilise une approche de tracé des rayons pour un calcul physique correct et 100% naturel du son.
PRG Lab, une division de PRG XL Video, basée en Allemagne, développe des solutions interactives sur-mesure pour les événements et expositions. PRG Lab apportera son soutien au projet avec un système de caméra à 360°/ 3D Nokia OZO pour capturer une vidéo sphérique à 360° des actes choisis au festival.
La coopération entre audioborn et PRG Lab sera l’une des premières utilisations commerciales du système OZO dans une production de cette envergure. En plus des enregistrements multipistes standards, audioborn capturera le son sous la forme d’un enregistrement 3D, en utilisant le microphone prototype Sennheiser VR, et sera en mesure de reproduire de façon très réaliste un son 3D pour les enregistrements.
„Les méthodes que nous utilisons pour capturer le son – qui est la partie la plus importante du Festival de Jazz de Montreux – seront pionnières pour l’enregistrement audio 3D ainsi que la reproduction. En utilisant notre logiciel processeur audio 3D Auratorium, nous serons en mesure d’atteindre le plus haut degré possible d’immersion pour les archives de jazz. „, explique Dr. Dirk Schröder, PDG de audioborn.
Nous devrons déterminer comment chaque instrument et son réagiront en fonction de la position de la caméra dans la pièce. Lorsque le son et la vidéo seront combinés pour l’expérience de réalité virtuelle, l’utilisateur se sentira comme s’il ou elle assistait au festival en personne. Notre objectif est une immersion totale au niveau son et image. Nous sommes fiers de travailler en étroite collaboration avec PRG Lab comme partenaire professionnel pour la capture vidéo 3D.“
«Ce projet est remarquable dans ses dimensions. Nous allons enregistrer une énorme quantité de données pendant les 16 jours du festival via le système OZO. Ce sera le plus grand défi auquel nous devrons faire face pendant ce projet” a commenté Michael Ochs de PRG Lab. „Ceci est très excitant, nous utilisons une technologie de pointe pour le Festival de Jazz de Montreux. C’est le premier projet de ce genre et nous ne pouvons pas nous appuyer sur les expériences précédentes. Nous devrons déterminer comment chaque instrument et son réagiront en fonction de la position de la caméra dans la pièce. Lorsque le son et la vidéo seront combinés pour l’expérience de réalité virtuelle, l’utilisateur se sentira comme s’il ou elle assistait au festival en personne. Notre objectif est une immersion totale au niveau son et image „.
L’un des défis de ce projet est la grande quantité de données recueillies via l’enregistrement 3D. Un concert de trois heures crée environ 2 TB de données; l’équivalent de 16 jours complets d’enregistrement traditionnel.
PRG Lab est en expansion continue de ses capacités 3D et utilisera les ordinateurs de production OZO ainsi que le logiciel Auratorium de audioborn pour créer des expériences immersives. Les mix audio peuvent être convertis pour les systèmes audio multichannel 3D ou la reproduction au casque binaural.
A propos de audioborn
audioborn est spécialisée en audio 3D et simulation acoustique d’une pièce. L’entreprise est basée à Cologne, en Allemagne. L’équipe développe des solutions avancées autour de son processeur en temps réel audio 3D, Auratorium, qui permet une reproduction du son 3D très réaliste et immersive pour le cinéma, la musique, la Cinematic VR et des applications de Réalité Virtuelle basées sur le tracé de rayon.
La société a été fondée par les principaux experts dans le domaine de la simulation acoustique d’une salle et la reproduction audio 3D. Plus de 12 années de recherche et de développement ont été nécessaire à la création d’Auratorium, l’un des processeurs audio 3D le plus avancé du marché.
En collaboration avec le Centre Metamedia de l’EPFL, dans le cadre de l’ambitieux Montreux Jazz Digital Project, audioborn est responsable de tous les enregistrements audio 3D ainsi que des reproductions réalistes des archives de Jazz de Montreux, inscrit au patrimoine mondial de l’UNESCO. L’héritage comprend plus de 5,000 heures de vidéo et d’enregistrements audio, y compris de grands noms tels que Ella Fitzgerald, Miles Davis, Aretha Franklin, Ray Charles, Led Zeppelin, Frank Zappa, Deep Purple, Johnny Cash, David Bowie, Santana, Muse, Radiohead et Prince.
A propos de PRG Lab
PRG Lab est une unité de PRG XL Video (PRG AG), une filiale de Production Resource Group, L.L.C. (PRG). L’unité a été créée en 2016 et est basée à Düsseldorf, en Allemagne. PRG Lab développe des solutions logicielles personnalisées pour le marché de l’événementiel et de l’exposition; pour les salons et stands d’exposition; ainsi que des événements où des applications et innovations interactives complexes sont nécessaires. Avec le matériel complet et la connaissance des logiciels acquise de part sa vaste expérience de l’industrie de l’événement, PRG Lab propose des solutions interactives et novatrices à partir d’une source unique – de la conception à la programmation et la mise en œuvre. L’expertise de PRG Lab comprend également la recherche et le développement de solutions logicielles et technologies pour PRG à l’échelle mondiale.
A propos du festival de Jazz de Montreux
Depuis 50 ans, le Montreux Jazz Festival a été un témoin et un acteur visionnaire dans l’évolution des technologies de l’industrie de la musique. Que ce soit pour la qualité du son, les formats de collecte, l’enregistrement de concerts, ou le backline, le Festival a toujours cherché à offrir des conditions optimales pour les artistes et le public dans nos salles de concert.
Montreux Jazz Digital Project
En 2007, l’Institut de Technologie Fédéral suisse de Lausanne (EPFL) et la Fondation Claude Nobs, conservateur des archives présidée par Thierry Amsallem, ont uni leurs forces et compétences pour commencer un projet unique afin de numériser les bandes audiovisuelles en haute définition. Une grande tâche, dans le but de préserver et d’ajouter de la valeur aux archives, et en tirer le meilleur parti pour le bénéfice des générations futures. Un autre objectif est de rendre les archives accessibles au plus grand nombre, tout en respectant les droits d’auteur, par le développement de technologies de diffusion interactives, non seulement pour célébrer ce patrimoine artistique, mais aussi dans le but de le rendre disponible à des fins éducatives, culturelles et scientifiques.
http://metamedia.epfl.ch/montreux_jazz_digital_project/home
{phocagallery view=category|categoryid=164|imageid=2585}
{phocagallery view=category|categoryid=164|imageid=2584}
{phocagallery view=category|categoryid=164|imageid=2586}
