Kumanta Live Interactieve Visuals

In onze voortdurende verkenning van de kruising tussen muziek en visuele kunst, werkten we onlangs samen met Kumanta, een bandproject van PXL Music, om een meeslepende audiovisuele liveshow te creëren. Het doel? De impact van hun optreden versterken met interactieve visuals die in real time reageren op de sfeer en het verhaal van elk nummer. Voor vijf verschillende nummers gebruikten we telkens andere technologieën—van point clouds tot motion capture avatars—om de emotionele beleving te versterken en het publiek actief mee te nemen in de performance.

1. Visuals Die Meebewegen met de Muziek

Voor twee nummers richtten we ons op het live vastleggen van beweging. Een Azure Kinect-camera werd gericht op de zangeres om in real time een point cloud van haar lichaam te genereren. Deze data werd verwerkt in TouchDesigner, waar haar bewegingen werden omgezet in pulserende, deeltjesachtige visuals.

Het resultaat was geen statische achtergrond, maar een levend canvas dat ademde, bewoog en reageerde op elke beweging.
De zangeres werd zo niet alleen performer, maar ook een bron van visuele expressie—de grens tussen lichaam en beeld vervaagde volledig.

 

2. Van Realiteit naar Anime: De Zangeres als Avatar

Voor twee andere nummers transformeerden we de zangeres in een gestileerde anime-avatar. Met behulp van een Rokoko motion capture-suit kon ze live optreden terwijl haar digitale alter ego op het scherm exact dezelfde bewegingen uitvoerde.

De avatar werd ontworpen in VRoid Studio en gepersonaliseerd om aan te sluiten bij haar visuele identiteit. Daarna werd het personage in Unreal Engine 5 geladen, waar een real-time render via NDI-camera’s werd doorgestuurd naar Resolume voor verdere visuele bewerking.

Deze hybride opstelling liet toe om een expressieve digitale versie van de zangeres te creëren—perfect gesynchroniseerd met haar live optreden, en met een unieke visuele stijl die paste bij de sfeer van de nummers.

 

3. De Final Touch: Live VJing

Hoewel de reactive visuals en motion capture-elementen al veel narratieve en technologische diepgang toevoegden, werd de ervaring volledig afgemaakt door een live VJ.

Tijdens het optreden voegde de VJ extra lagen van visuele effecten toe, afgestemd op het publiek en de dynamiek in de zaal.
Hierdoor ontstond een performance die niet alleen de band volgde, maar ook actief reageerde op de energie van het moment—waardoor elke show uniek werd.