inspiratiedag Virtual Music Experiences

Hoe kan je gametechnologie en immersive audio inzetten om muzikale ervaringen naar een ander niveau te tillen? Dat is de centrale vraag in het TETRA-onderzoeksproject Virtual Music Experiences van Howest Digital Arts & Entertainment Research (Kortrijk) en PXL-Music Research (Hasselt). Sociaal Fonds Podiumkunsten is onderdeel van de begeleidingsgroep. Op 16 mei vindt een inspiratiedag plaats in Stadsschouwburg Antwerpen.

De onderzoekers in het project bouwen in twee jaar een 6-tal use cases die de mogelijkheden van deze technologieën showcasen. Van een AR-beleving voor een metalband over een immersive concert ondersteund door AI-gegenereerde beelden tot een virtuele replica van concertzalen mét bijhorende akoestiek: het zijn maar enkele voorbeelden van toepassingen die worden gebouwd. Technologieën als AI, VR, XR, AR, spatial audio, virtual production, 3D scanning etc. worden ingezet om bestaande muziekervaringen (bv. live concerten) te verrijken of volledig nieuwe ervaringen te bouwen.

Programma

Op 16 mei dompelen we je onder in deze wereld van technologie en muziek.

In de voormiddag krijg je een inspirerend overzicht van beschikbare technologie en hoe die kan ingezet worden voor live ervaringen of voor fan/audience engagement.

In de namiddag kan je deelnemen aan verschillende workshops, o.a. over hoe het immersive audio concert van Tsar B in Wintercircus tot stand kwam of hoe je een zaal inscant en er in een game engine als Unreal mee aan de slag kunt om bv. een virtueel concert te organiseren of je licht- en stagedesign tot leven te zien komen.

Workshops

• Ambeo Spatial Audio. In deze workshop toont Sennheiser (lid van de gebruikersgroep van het project) de technologie die o.a. door Netflix wordt gebruikt. Ambeo 2-Channel Spatial Audio vertaalt een originele immersive of surround mix naar twee audiokanalen voor een ruimtelijke ervaring die veel verder gaat dan stereo.
• 3D scans van zalen, personen of objecten: een stappenplan. In deze workshop bekijk je samen met de onderzoekers van DAE Research enkele apps en best practices om een object, zaal of venue in te scannen. Daarna tonen we hoe je deze scans in Unreal Engine kan importen (zie afbeelding van concertzaal De Kreun bovenaan de pagina) en er verder mee aan de slag kan om bv. virtuele concertervaringen te bouwen, visuals voor live shows in elkaar te steken of zelfs hele lichtdesigns uit te werken in VR.
• Tsar B - To The Stars @ Wintercircus: the making of. Voor het allereerste immersive concert in hun gloednieuwe zaal klopte Muziekclub Wintercircus aan bij Tsar B. Omdat Justine, haar band en technieker nog weinig ervaring hadden met immersive audio, werd PXL-Music Research ingeschakeld om het immersive verhaal mee vorm te geven. In deze workshop wordt uitgelegd hoe haar "To The Stars" show werd vertaald naar een meeslepende, artistiek onderbouwde immersive beleving. Het team belicht het traject, de obstakels en hoe ze er mee omgingen.
• Spatial Mixing & Virtual Monitoring. Deze workshop, verzorgd door Dear Reality, exploreert nieuwe ontwikkelingen in audio mixing. Spatial Mixing plaatst geluidselementen in een mix op basis van hun ruimtelijke positie, terwijl Virtual Monitoring akoestische ruimtes digitaal simuleert voor realistische beoordeling van mixen.