Audience Controlled Visuals

Audience Controlled Visuals

Propositie

Jasper Vandegaer - 2011.2012

Onderzoeksonderwerp

AUDIENCE PARTICIPATION

Kernwoorden LIVE VISUALS

VIDEOJOCKEY

PROTOTYPING

INTERACTION


1

Onderzoeksonderwerp Context & Situering De dansclubomgeving omvat veel interactie. Hoofdzakelijk tussen bezoekers onderling en de personen tewerkgesteld door de club. Een club is een interessante plaats met veel verschillende ruimtes en activiteiten. Er zijn verschillende actoren in de ecologie van een club: disc jockey’s(DJ’s), video jockey’s(VJ’s), bezoekers, et cetera. Tussen het merendeel vindt interactie plaats. Een bezoeker kan aan een DJ vragen om een bepaald liedje te spelen. Hij komt met het personeel in contact wanneer hij bijvoorbeeld iets besteld om te drinken. Er is slechts één grote ‘missing link’ in deze ecologie: interactie tussen de VJ en de bezoeker. Een VJ staat in voor het produceren van visuals. Deze visuals komen het vaakst voor in de vorm van bewegende beelden, geselecteerd en gemanipuleerd door de VJ. Door middel van een beamer worden ze geprojecteerd. Een VJ zorgt ervoor dat de omgeving wordt aangepast met behulp van deze visuals. De bezoeker heeft geen inspraak in dit proces. Het proces van live visuals wordt volledig gevoed door input van de VJ. Er is al veel onderzoek gevoerd rond publieksparticipatie in een dansclub context. Het meeste onderzoek situeert zich rond nieuwe en innovatieve interfaces. Deze laten toe om een unieke ervaring te creëren voor de bezoeker en sommige of alle aspecten van de visuele en auditieve expressie te controleren.


2

Onderzoeksonderwerp Context & Situering Interfaces voor visuele en muzikale expressie In 2005 ontwierpen Bayliss, Sheridan en Villar ‘iPOI’ (Bayliss, Sheridan en Villar, 2005). Een touw met geïntegreerde sensors voor bezoekers van clubs. Bezoekers kunnen met het touw in de hand gaan dansen. De sensors in het touw detecteren de vormen/ zwaaibewegingen van de personen die dansen en sturen deze door naar een centraal systeem. Hierna worden automatisch visualisaties gegenereerd die elders in de club te zien zijn. Een ander voorbeeld is ‘codeBLUE’. Dit is een systeem waarbij dansers kleren dragen met geïntegreerde sensors (HRonmin e.a., 2003). Deze sensors sturen via bluetooth informatie over de bewegingen van de dansers door naar een centraal systeem. De systeemsoftware transformeert deze data real-time in muzikale wijzingen. Melodie, ritme, et cetera, van de muziek worden beïnvloed door de bewegingen van de dansers. De DJ kan aan de hand van een console het effect bepalen, dat elk type van sensor produceert. HP researcher DAVE Cliff ontwierp in 2006 ‘hpDJ’. Een systeem ontworpen om alle taken uitgevoerd door een menselijke DJ te automatiseren. Dit systeem wordt gevoed door data verkregen via verschillende sensoren die feedback van het publiek verzamelen (Cliff 2006).


3

Onderzoeksonderwerp Context & Situering Roman Jurik beantwoorde in zijn bachelor thesis “Going AudioVisual’ vragen over “the future of visual jockeying & visual projections & their impact on live music entertainment”(Jurik, 2004). Na samenwerking met de ‘VJ-community’, concludeerde hij dat VJ’s zichzelf als onafhankelijke visuele artiesten zien, die hun identiteit willen behouden en op zoek zijn naar nieuwe mogelijkheden voor live visuals. Ze willen afstappen van hun klassieke rol als VJ. Volgens Jurik, zouden live visuals de ervaring van een live evenement en de betrokkenheid van de bezoeker vergoten. De druk op de artiest wordt daarenboven verlaagd. Live visuals worden “mainstream for the club/dance scene” (op. cit., p.56). Olivier Berger studeerde in 2010 af aan de Katholieke Hogeschool Limburg, opleiding communicatie- & multimediadesign. Zijn masterthesis “Interactive Music V*#2@sualisation” is een belangrijk vertrekpunt voor mijn onderzoek (Berger, 2010). In deze thesis onderzoekt Olivier de verschillende mogelijkheden om interactie te stimuleren met een videoshow op evenementen. Het resultaat van zijn onderzoek is een design dat een vorm van interactie tussen de bezoeker van het evenement en de videoshow mogelijk maakt Deze bevindingen vormen een belangrijk vertrekpunt voor mijn verder onderzoek en onderzoeksvraag.


4

Onderzoeksonderwerp Onderzoeksvraag In een clubomgeving is er duidelijk een missing link tussen de bezoeker en de VJ. Er is geen enkele vorm van interactie tussen deze twee actoren. Een bezoeker heeft toaal geen inpraak in het proces van live visuals. Deze visuals worden volledig gecreëerd en bepaald door de VJ. Hij selecteert de beelden, teksten en animaties die worden vertoond. Ik wil in mijn onderzoek de bezoekers betrekken in dit proces. Dit resulteert in volgende onderzoeksvraag:

“Hoe kan ik het publiek laten participeren in het proces van live visuals?”


5

Onderzoeksonderwerp Doelstellingen Een eerste doelstelling is inzicht krijgen hoe een toeschouwer kan participeren in het proces van live visuals. Daarvoor zal ik de verschillende deelaspecten van mijn onderwerp en welke vormen visuele interactie kan aannemen uitgebreid moeten onderzoeken. Tijdens mijn onderzoek wil ik een nieuwe tool ontwikkelen voor de VJ. Hierdoor zou hij van zijn klassieke rol kunnen afstappen. Dit zou zowel voor de VJ als de toeschouwer een meerwaarde moeten betekenen. Een andere doelstelling is de persoonlijke ervaring van een bezoeker in een dansclub te vegroten. Dit wil ik doen door de bezoeker te betrekken in het proces van live visuals. Tot slot hoop ik met mijn onderzoek nieuwe mogelijkheden te ontdekken van interactie met live visuals. Er duiken de laatste maanden veel innovatieve projecten op. Ik hoop dat ik mijn aan deze rij kan toevoegen.


6

Onderzoeksonderwerp Inspiratie

IPOI

LA Danse Kinect

TransNdance


7

Onderzoeksproces Onderzoeksmethodes Mijn onderzoek zal zich opsplitsen in verschillende deelaspecten. Beginnend met een literatuurstudie. Hiervoor zal ik onder meer beroep doen op het boek ‘Dancing in the distraction factory’ van Andrew Goodwin (1992). Dit boek is het resultaat van een grondig onderzoek dat het effect van de MTV-cultuur op visualisaties schetst. Daarnaast ga ik het evolutieproces van muziekvisualisaties van 1992 tot nu bestuderen. Vervolgens zal ik de verschillende vormen van bewegingsdetectie onderzoeken. Beweging zal de basis vormen van de input. Het is dan ook noodzakelijk om de verschillende vormen van beweging te analyseren. Daarnaast zal ik onderzoeken hoe andere inputmogelijkheden de bezoeker meer interactie met visualisaties kan bieden. Hierbij denk ik in de eerste plaats de mogelijkheden te verkennen die smartphones tegenwoordig bieden. De mogelijkheden van RFID(Radio Frequency ID), muziek, Twitter, et cetera, wil ik ook verkennen tijdens dit gedeelte. De verschillende deelaspecten zal ik voornamelijk onderzoeken door research through design. Deze methode leent zich uitstekend voor mijn onderzoek omdat ik zo de verschillende nieuwe technieken in detail kan onderzoeken. Research through design is een prima benadering voor interactie design research. Het vormt de rode draad doorheen mijn thesis.


8

Onderzoeksproces Onderzoekmethodes Vervolgens zal ik de verscheidene soorten software, nodig voor het verwerken van gegevens, uitvoerig onderzoeken. Een vergelijking tussen de verschillende softwarepakketten is essentieel om de geschikte software te vinden. Er moet een duidelijk onderscheid worden gemaakt in twee soorten interactie: directe- en indirecte interactie. Beiden vormen maken het mogelijk te participeren in het proces van live visualisaties. Hardware als Wii en Kinect zorgen eerder voor een directe vorm van interactie met de visualisaties. Smartphones leunen eerder aan bij een indirecte vorm van interactie. De meeste toestellen beschikken over een camera en internet. Dit biedt veel mogelijkheden om te participeren in het proces van live visuals. Tot slot zullen ook de verschillende presentatiemogelijkheden van de uiteindelijke interface, alsook verschillende visualisatievormen onderzocht worden.


9

Onderzoeksproces Evaluatie Ik ga gebruik maken van user-tests om mijn prototype(s) te testen bij de verschillende doelgroepen. Zo kan ik de voor- en nadelen van elk interactiemogelijkheid testen. Dit zal mij helpen om de meest geschikte vorm van bewegingsdetectie te vinden. Maar ook bij andere vormen van input wil ik deze strategie toepassen. Door het testen van mijn prototypes wil ik nieuwe vragen naar boven brengen en zorgen voor een iteratie binnen dit proces. Dit moet uiteindelijk tot mijn finaal ontwerp leiden. Het finale ontwerp wil ik uiteindelijk willen opstellen en testen in een club omgeving. Dit ontwerp moet een meerwaarde betekenen voor de club, de artiest en de bezoeker.


10

Relevantie onderzoek Maatschappelijke relevantie Tegenwoordig wordt er veel meer belang gehecht aan het visuele aspect bij live performances. Live visuals komen steeds meer voor. De functie van deze visuals is echter beperkt. Het is er, en wij als toeschouwer kijken er naar. Een toeschouwer heeft er geen invloed op. Ze worden geproduceerd door een VJ en geprojecteerd achter of naast de artiesten. Tijdens mijn onderzoek wil ik dit cliché proberen te doorbreken en op zoek gaan naar mogelijkheden van participatie in het proces van live visuals. Het moet de ervaring van de toeschouwer verhogen en een persoonlijke ervaring te creëren. In de eerste plaats wil ik de rol van VJ behouden en een nieuwe tool ontwikkelen voor hun performances te verbeteren.


11

Relevantie onderzoek Waarom? In mijn vrije tijd organiseer ik regelmatig evenementen. Zo organiseer ik ook één maal per jaar Rock Landen. Een muziekfestival dat jaarlijks 1000 bezoekers lokt en waarbij ik optreed als hoofdorganistor. Vanuit mijn interesse voor muziekfestivals ben ik op zoek gegaan naar mogelijkheden om de performance te versterken voor het publiek en een unieke ervaring te creëren. Uiteindelijk kwam ik bij het onderwerp publieksparticipatie in het proces van live visuals. Vanwege enkele factoren zoals de leeftijd en interesse van het publiek, ben ik overgeschakeld naar een andere context die meer toepasselijk is voor mijn onderwerp. Zo is de context van mijn onderzoek veranderd naar een dansclubomgeving. Het wordt steeds meer duidelijk dat de evenementervaring van een toeschouwer gepaard gaat met de visuele ervaring. CMD is een multimediaopleiding die het grafische aspect hoog in het vaandel draagt. De combinatie mijn opleiding CMD en mijn interesse voor de muziekbeleving op festivals bracht mij bij dit onderwerp. Tijdens de verschillende modules in het masterjaar wordt er vaak gewerkt rond audio-video. Met de keuze van mijn onderwerp heb ik hier rekening mee proberen te houden. Hierdoor hoop ik in deze modules veel op te steken voor mijn thesis.


12

Relevantie onderzoek Voor wie? Mijn onderzoek is bedoeld voor heel wat doelgroepen, maar in het bijzonder voor: - Videojockeys. In mijn onderzoek ga ik op zoek naar nieuwe mogelijkheden van live visualisaties. Dit zou uiteindelijk een nieuwe tool moeten opleveren voor VJ’s. - Eigenaars van dansclubs. Het is de bedoeling dat het finale ontwerp in een dansclub opgsteld kan worden. Het versterkt de persoonlijke ervaring van een bezoeker van een dansclub waardoor het meerwaarde wordt voor eigenaars van clubs. - Iedereen die onderzoek voert of geïnteresseerd is in publieksparticipatie omtrent visualisaties. - Organistoren van evenementen. Het finale ontwerp zou uiteindelijk schaalbaar moeten zijn naar andere omgevingen en toepassingen. Hoofdzakelijk zou het verder gebruikt kunnen worden bij evenementen met live performances.


13

Planning Jaarplanning

Praktische uitvoering Tijdens de verschillende modules in het masterjaar hoop ik de technische kennis te verwerven die mij in staat moet stellen zelf prototypes te ontwerpen. Tijdens de schoolvakanties zal ik mij hoofdzakelijk bezig houden met prototyping en desk research. Via desk research hoop ik de nodige theoretische kennis te verwerven die mij helpt bij het bouwen van prototypes en het uitwerken van mijn onderzoek. Ik december ga ik een interview met een videoartist plannen, om meer inzicht te krijgen in hun rol en manier werken. Mijn onderzoek ga ik heel transparant weergeven via een blog. Hierop zullen de laatste ontwikkelingen terug te vinden zijn. Het finale ontwerp wil ik opzetten in een dansclub. Daarom zal ik tijdig contact opnemen met nabijgelegen clubs.


14

Begeleiding Voorstel Voorstel promotoren Rudy Knoops Sandy Claes Mijn onderwerp valt voor beiden docenten binnen hun expertisegebeid. Daarboven heeft Rudy Knoops mijn propositie in het schakeljaar begeleid. Hij was eerder al promotor van Olivier Berger, met een soortgelijk onderwerp. Extern netwerk Doorheen mijn onderzoek zal duidelijk worden met welke bedrijven of experten samengewerkt kan worden.


15

Bibliografie

Bayliss, A., Sheridan, J. G. & Villar, N. (2005). New Shapes on the Dance Floor: Influencing Ambient Sound and Vision With Computationally Augmented Poi. International Journal of Performance Arts and Digital Media 1. pp. 67–82. Berger, N. (2010). Interactive Music V*#2@sulisation. Genk: Katholieke Hogeschool Limburg. Goodwin, A. (1992). Dancing in the distraction factory. Minneapolis: University of Minnesota Press. Hromin, D., Chladil, M., Vanatta, N., Naumann, D., Anjum, F., & Jain, R. (2003). codeBLUE: A Bluetooth Interactive Dance Club System. Morristown: Stevens Inst of Technology. Kaiser, G., Ekblad, G. & Broling, L. (2007). Audience Participation in a dance-club context: design of a system for collaborative creation of visuals. Germany Bremen: University of Bremen. Wikipedia. (2010). Multitrack recording. Wikipedia: http:// en.wikipedia.org/wiki/Multitrack_recording, geraadpleegd op 10 oktober 2010. Zimmerman, J., Forlizzi, J. & Evenson, S. (2007). Research through design as a method for interaction design research in HCI. USA: Carnegie Mellon University.


16

Audience Controlled Visuals

Recommend Documents