Bipolar van James Alliban presenteert een audiovisuele spiegel die een soundscape genereert uit de aanwezigheid en beweging van zijn onderwerpen. De resulterende audiogegevens (inclusief die van de deelnemer) worden gebruikt om het lichaam te transformeren in een vervormd portret dat fluctueert tussen staten van chaos en orde. De video levert ook een enorm effectief werk van het vastleggen van de eindeloze fascinatie van de onderwerpen voor de installatie, en biedt onmiddellijke voldoening en een gevoel van eindeloze mogelijkheden.
Hoe ben je op het idee voor deze video gekomen?
Dit stuk begon als een experiment. Ik sprak op een designfestival en werd gevraagd (samen met de andere sprekers) om een korte video 'bedankt voor het komen' samen te stellen om af te spelen aan het einde van het evenement. Ik wilde iets interessants doen dan gewoon in mijn smartphone praten. Oorspronkelijk was ik van plan om een toepassing voor het volgen van gezichten te maken die in mijn gezicht kromde en glitchde als reactie op mijn toespraak. Na verloop van tijd veranderde ik dit in een hele lichaamservaring met de Kinect-camera.
Ik kwam dit effect tegen dat zo dramatisch leek dat ik besloot om verder te onderzoeken en Bipolar te publiceren (zo genoemd vanwege de constante schommelingen tussen de staten van orde en chaos) in de vorm van een korte video. Mensen begonnen geïnteresseerd te raken in het tentoonstellen van het stuk, dus ik heb het aangepast om een installatie te worden. Het project werd een samenwerkingsverband toen Liam Paton van Silent Studios een interactief geluidsaspect toevoegde. Sindsdien is het tentoongesteld op verschillende evenementen en tentoonstellingen.
We houden van nerds, dus verwen ons, waar kijken we hier naar?
Het basiseffect is niet al te ingewikkeld. Ik gebruik openFrameworks, een op C ++ arts gebaseerde programmeer toolkit. Ongeveer 30 keer per seconde worden de dieptegegevens en videofeed van een Xbox Kinect-camera gecombineerd om een 3D-model van de bezoekers te maken. Ik gebruik de geluidsgegevens die uit de microfoon komen om elk tweede punt in het 3D-model te extruderen. De punten worden geëxtrudeerd in de richting waarin ze zich bevinden om een ruimtelijke esthetiek te bieden die niet echt mogelijk is met de gegevens van een standaardcamera.
Verder wordt het behoorlijk ingewikkeld. Achter de schermen gebeurt nog veel meer. Ik gebruik de kracht van de grafische kaart om het 3D-model glad te maken en een aantal gegevens te berekenen die de toepassing versnellen en over het algemeen het uiterlijk van het stuk verbeteren. Ik heb een gebruikersinterface in de app met ongeveer 15-20 pagina's met knoppen en schuifregelaars waarmee ik het stuk kan aanpassen totdat ik tevreden ben. Wat het geluid betreft, wordt de beweging van de deelnemer berekend en verzonden naar een afzonderlijk stuk software dat door Liam in Max / MSP is gebouwd. Vervolgens maakt hij het gedraaide soundscape op basis van de hoeveelheid activiteit en verschillende andere factoren, zoals locatie en nabijheid. Deze audio wordt vervolgens opgepikt door de microfoon samen met andere geluiden in de omgeving en gevisualiseerd op het lichaam van het onderwerp.
Wat was voor jou het meest bevredigende aspect aan dit specifieke stuk?
Hoewel het leerproces en de ontdekking en serendipiteit erg leuk waren, was het beste deel van dit project het eindresultaat. Kijken hoe mensen de installatie voor het eerst ontdekken en ermee omgaan, is een prachtige ervaring, die ik leuk vind voor elk stuk dat ik het publiek aanbied. Anoniem achterin de kamer staan en mensen zien genieten van een onverwachte ervaring waar ik hard aan gewerkt heb, is altijd zeer de moeite waard.
Wat is het laatste goede wat je hebt gelezen, gezien of gehoord?
Ik ging onlangs naar het nieuwe stuk "Momentum" van de Universiteit van Virginia in de galerij van Barbican's Curve. Het bestaat uit een reeks van 12 mechanische lichtslingers die uniform in de donkere ruimte slingeren. Het effect was zeer contemplatief en, voor mij althans, enigszins griezelig vanwege het onnatuurlijke gedrag van deze langzaam bewegende schijnwerpers.
Wat is het volgende?
Ik spreek met een paar curatoren over het tentoonstellen van Bipolar, en ondertussen blijf ik nieuwe manieren verkennen om het lichaam te vertegenwoordigen door interactiviteit. Ik werk momenteel aan verschillende projecten, waarvan er een paar binnenkort vallen, dus houd een oogje in het zeil.
