TEST REPORT - V2.0 USABILITY/PLAYABILITY EMIEL KAMPEN 12/08/2015
GROEP MIN ÉÉN (GROEP 13) THOMAS ASSCHEMAN Tech-Operator/Recruiter TIAGO DOS SANTOS PEDROSA TEST MONITOR KRIS VAN GEEL RECRUITER TIM JANSSEN TECH-OPERATOR COLLIN KASBERGEN DATALOGGER
INLEIDING
Als Team Min één is er aan ons gevraagd door tweede jaars G&I studenten aan de HKU of wij hun spel ‘Blind Love’ konden testen. Het doel van de playtest was om te kijken of de game mechanics werken en of ze makkelijk te begrijpen zijn.
Wij hebben ervoor gekozen om dit spel te testen, omdat het gebruik maakt van een eyetracker en wij het interessant vonden om te kijken naar het effect dat deze vorm van spelen heeft op de speler. Daarnaast hebben wij voor dit onderzoek een andere doelgroep gekozen dan de doelgroep waarvoor deze game origineel ontworpen is. Wij wilden namelijk kijken naar de verscheidene doeleinden waarvoor deze game gebruikt kan worden en of deze game geschikt is voor een jongere doelgroep. Na in gesprek te zijn geweest met de ontwerpers, bleek van hun kant ook interesse, waardoor we dit voorstel hebben doorgezet, zoals te lezen zal zijn in dit test report.
INHOUDSOPGAVE
Inleiding 2 INHOUDSOPGAVE 3 TEST LOCATIE 4 PLANNING 5 HET GETESTE SPEL 6 Doel van de test 7 Testpersonen 8 Observatie 11 DATA 14 “Problemen” 16 ONTWERP SUGGESTIES 18 QUESTIONAIRE/Survey 20 BIJLAGE 23
TEST LOCATIE
De test heeft plaats gevonden in de woning van Tim in Hilversum, hierbij konden de test personen, omdat het mooi weer was, buiten in de tuin wachten om aan de beurt te komen. De test ruimte zelf was de woonkamer van Tim en de observatie ruimte zat daar direct naast.
Dit was voor ons erg handig, omdat we zo makkelijk een HDMI kabel konden trekken van de test ruimte naar de observatie ruimte en zo dus makkelijk met de test mee konden kijken. Ook was deze ruimte een goede ruimte om de vragenlijst in te vullen zodat de volgende persoon alvast kon beginnen met het kalibreren van de ogen voor de eye tracking software.
De test ruimte zelf is ongeveer 12m² met een schuin dak. Tegen de achterwand staat het bureau waar de test persoon zit, achter hem/haar staat een tafel met daarachter een schap met het koffiezetapparaat. In de observatie ruimte, die daar direct naast is, stond een bank, een klein koffie tafeltje en de tv om de test op te kunnen volgen. Op de koffie tafel stond ook een laptop om achteraf de vragenlijst in te kunnen vullen, zonder dat daar de volgende persoon last van zou hebben.
Zie test plan voor uitgebreide beschrijving van test locatie
Afbeelding 1 - Plattegrond test ruimte en observatie ruimte.
Afbeelding 2 - Situatie niet-testende testpersonen.
PLANNING
De algehele test liep erg goed op zijn schema. We hadden afgesproken met de test personen gemaakt om om kwart voor 2 aanwezig te zijn om te beginnen met testen. Na een voorstel ronde en een korte introductie konden we na een kwartier ongeveer beginnen met de test. Het testen zelf ging sneller dan we hadden voorspeld in de planning. Dit kwam doordat een persoon die al klaar was met testen, in een andere ruimte zijn enquête kon invullen. Hierdoor kon de volgende al beginnen met de test waardoor we dus eerder klaar waren met het testen. Uiteindelijk waren we zeker een uur eerder klaar dan gepland.
De originele planning is hier onder te vinden
HET GETESTE SPEL
‘Blind Love’ is ontwikkeld door studenten uit het tweede jaar van de G&I faculteit van de HKU. Zij hebben dit spel gemaakt tijdens het ‘Happy Ageing’ project.
Tijdens het ‘Happy Ageing’ project moeten de studenten een game maken voor een specifieke doelgroep, namelijk ouderen. Desondanks wilden wij juist testen of dat deze game leuk en speelbaar is voor een groter publiek, waardoor wij hebben gekozen voor de doelgroep jongeren. Verder willen wij kijken of wij iets nieuws kunnen voorstellen om de game nog aantrekkelijker te maken.
‘Blind Love’ maakt gebruikt van de eyetracker van Tobii, waarbij de speler een mol helpt die wanhopig op zoek gaat in het bos naar zijn vrouw. Het doel van de speler is om de mol te beschermen van gevaren en obstakels door middel van oogbewegingen. Voor elk obstakel is er een nieuwe variatie qua interactie. Door te kijken naar een blokje, kan je het blokje stuk maken zodat de mol verder kan lopen. Door te kijken naar een vogel, kan je de vogel wegjagen en zo de mol redden van zijn scherpe klauwen.
In de afgelopen jaren wordt er steeds meer geëxperimenteerd met ‘eyetracking’ of bewegingssensors. De eyetracker staat nog in de kinderschoenen wat betreft gaming, waardoor deze game zeer interessant is voor onderzoek. Zie testplan voor uitgebreide uitleg over het geteste spel. Hoe werkt de besturing van het spel? De game kan met de eye sensor of de muis worden bestuurd. Met de muis wijs je naar een object dat je wil aanklikken en na 2 seconden zal het object geselecteerd worden en er ontstaat een reactie. Met de eyetracker werkt het precies hetzelfde, alleen in plaats van het gebruik maken van de muis, wordt de richting van de ogen geregistreerd en wordt het aangewezen op het scherm. Hoe werkt Tobii soft- en hardware? De eyetracker is uitgerust met zogenaamde near-infrared projectoren. Deze projecteren patronen op het oog van de gebruiker. De patronen op het oog worden vervolgens weer gescant. Door de verschillen tussen de geprojecteerde patronen en de patronen op het oog van de gebruiker kan uitgerekend worden waar deze naar kijkt.
Afbeelding 3 - Werking eyetracker
Doel van de test
Tijdens deze test hopen wij dat wij een paar ontwerp suggesties voor de tweede jaars studenten te kunnen maken door een paar vragen te beantwoorden.
De intuïtiviteit van de game mechanics
In deze test gaan wij het gedrag van de spelers bevragen om te weten te komen of de mechanics in het spel logisch werken. De bedoeling is dat elke speler maximaal 5 minuten over het hele spel doet. Boven de 5 minuten betekent het dat de speler er te lang over doet om het spel of de interactie van het spel te begrijpen. De drie types interactie waarmee de speler te maken zal krijgen zijn: - Stilstaande objecten waar voor een bepaalde tijdsduur naar gekeken moeten worden, om verder te kunnen gaan. - Draaiende objecten waar voor een bepaalde tijdsduur naar gekeken moeten worden, om verder te kunnen gaan. - Stilstaande objecten waar niet naar gekeken moet worden om verder te kunnen gaan.
Deze interacties zullen wij onderzoek door drie vragen te stellen en te beantwoorden. De drie vragen zijn: - Hoe lang doet een speler erover om erachter te komen hoe de interactie werkt? - In hoeverre heeft de art invloed op de leesbaarheid van de mechanics? - Wat voor effect heeft de eyetracker op de algehele gameplay?
Speelbaarheid voor een andere doelgroep
Hiermee willen wij een beeld schetsen van hun ‘over-all experience’ om vervolgens met de conclusie die wij krijgen een ontwerp suggestie te kunnen maken.
Verder willen wij door middel van deze test kijken of dit spel speelbaar is voor een andere doelgroep. Origineel is deze game gericht op een ouder publiek, maar voor deze test willen wij personen binnen de leeftijdscategorie 18 t/m 27 (oftewel jongeren) als doelgroep gebruiken. Om te kijken of het spel passend is voor de doelgroep, hebben wij twee kleine onderzoeksvragen bedacht, namelijk: - Zijn de puzzels uitdagend genoeg? - Is de game makkelijk te begrijpen?
Test personen
Vanwege één van onze test doelen, namelijk dat wij willen kijken of het spel interessant is voor jongeren, hebben wij een test delegatie samengesteld uit mensen van de leeftijdscategorie 17 tot en met 27.
De testpersonen die wij hebben gebruikt zijn kennissen van vrienden van ons die wij, als geheel team, niet kennen noch eerder hebben ontmoet. Dit hebben wij gedaan om zo de meest objectieve resultaten te kunnen verkrijgen uit de test, zonder dat persoonlijke relaties daarbij in de weg kunnen staan.
Wij hebben gebruik gemaakt van studenten van zowel het reguliere HBO (lees: alles behalve academia en ontwerpers opleidingen) als de Universiteit, om zo te voorkomen dat wij te maken zouden hebben met (toekomstige) ontwerpers of actieve professionals in de creatieve sector. Dit heeft te maken met het feit dat zij opgeleid zijn om op een andere manier naar producten en/of projecten te kijken dan de doorsnee gebruiker.
Daarnaast hebben wij ook gezocht naar testpersonen die speels ingesteld zijn en niet compleet onervaren zijn wat betreft ‘gamen’ in de breedste vorm van het woord. Daarmee bedoelen we dat we doelen op casual gamers, omdat we momenteel te maken hebben met een vrij korte en compacte game, waardoor deze doelgroep hier dus naadloos op aansluit.
TEST PERSONEN
Naam: Milou Verbeeke Leeftijd: 20 Opleiding/werk: CMV, Caissière Hobby’s: Buiten zijn, gamen Game gedrag: Speelt wel graag Sims 3 op de PC en gamed eigenlijk alleen maar als ze zich verveeld. Favoriete game: Sims 3
Naam: Ivana Tjong a Hung Leeftijd: 18 Opleiding/Werk: Kunstmatige Intelligentie, Werkeloos Hobby’s: Schrijven, gamen, series kijken Game gedrag: Gamed op dagelijkse basis en speelt vooral (j)rpg’s. Favoriete Game: Persona 3 Naam: Kevin van Wijk Leeftijd: 23 Opleiding/Werk: Informatica, Werkeloos Hobby’s: Tekenen, lezen, film kijken, gamen Game gedrag: Gamed op dagelijkse basis. Hij houdt het meest van shooters en story based spellen. Favoriete game: Bioshock
TEST PERSONEN
Naam: Mária van den Heuvel Leeftijd: 18 Opleiding/Werk: Liberal Arts & Sciences, Pizzabakker Domino’s Hobby’s: Paardrijden, naar het strand gaan Game gedrag: Speelt heel veel Mariokart, al een aantal jaar. Daarnaast houdt ze van gezelschapsspellen als Kolonisten van Katan en Monopoly. Favoriete game: Mario Kart Naam: Jente Zandstra Leeftijd: 27 Opleiding: Elektro techniek, Werkeloos Hobby’s: Elektro, Wiskunde, Lezen, DHZ Game gedrag: Speelt zo nu en dan een strategie spel op de computer, maar alleen als hij daar tijd voor heeft. Houdt verder erg van schaken. Favoriete game: Schaak
Observatie Aan de hand van de uitgevoerde test, hebben we een lijst samengesteld van de tien meest voorkomende observaties, zoals hieronder geïllustreerd.
1. 3 van de 5 spelers leken weinig controle te hebben tijdens het selecteren van een menu item. De selectie verliep bij testpersoon 1, 2 en 3 enigszins ongecontroleerd. Hun selectie tussen de verschillende items oogde chaotisch.
0:20 - Test persoon 1 (https://youtu.be/3p6Xhy-LeCo?t=20s)
2. Alle spelers begrepen binnen de eerste 4 seconden van het spel hoe ze blokken kapot moesten maken. Geen van de spelers heeft tijdens de gehele speel sessie stilgestaan voor een blok. De meesten maakten deze kapot zodra ze er een zagen.
0:30 - Test persoon 1 (https://youtu.be/3p6Xhy-LeCo?t=30s) en 0:34 (https://youtu.be/3p6Xhy-LeCo?t=34
3. 4 van de 5 spelers maakten het optionele blok in het begin van het spel kapot. In de eerste minuut van het spel loopt de speler door een tunnel. In deze tunnel moet de speler blokken kapot maken. De tunnel bevat 1 blok waar de speler zelf de keuze heeft om deze kapot te maken of niet. Opvallend was dat 4 van de 5 personen deze kapot maakten.
(00:51 Test persoon 1 https://youtu.be/3p6Xhy-LeCo?t=51s) (00:53 Test persoon 2 https://youtu.be/lQ8-y69f7UU?t=53s) (00:35 Test persoon 3 https://youtu.be/5vqbS9vhplI?t=35s) (00:34 Test persoon 4 https://youtu.be/YHTn0OpjOnU?t=34s)
(00:35 Test persoon 5 https://youtu.be/cv0DV_No_Xw?t=35s )
Observatie
4. 3 van de 5 spelers gaven aan (tijdens evaluatie) dat ze de vogel niet goed konden zien omdat deze te snel verdwenen na hierna gekeken te hebben. (01:24 Test persoon 1 https://youtu.be/3p6Xhy-LeCo?t=1m24s)
(01:27 Test persoon 2 https://youtu.be/lQ8-y69f7UU?t=1m27s) (01:07 Test persoon 3 https://youtu.be/5vqbS9vhplI?t=1m7s) (01:08 Test persoon 4 https://youtu.be/YHTn0OpjOnU?t=1m8s) (01:10 Test persoon 5 https://youtu.be/cv0DV_No_Xw?t=1m10s)
5. 5 van de 5 spelers dachten dat ze naar de rechter kant van de boot moesten blijven kijken om vooruit te gaan. Dit terwijl de boot automatisch naar rechts vaart.
2:55 - Test persoon 1 (https://youtu.be/3p6Xhy-LeCo?t=2m55s)
6. 3 van de 5 spelers keken minder dan 9 keer naar de wolken. De overige 2 test personen keken opvallend veel vaker naar de wolken(14 en 26 keer).
3:16 - Test persoon 1 (https://youtu.be/3p6Xhy-LeCo?t=3m16s)
7. Alle spelers begrepen binnen 10 seconden wat ze moesten doen bij de tandwielen. 4 van de 5 spelers draaiden na deze 10 seconden de tandwielen zonder onderbreking door.
2:06 - Test persoon 4 (https://youtu.be/YHTn0OpjOnU?t=2m6s)
Observatie
8. 1 van de 5 spelers is gepakt door de vogel. Achteraf gaf hij aan te willen weten wat er zou gebeuren als hij zich liet grijpen.
3:43 - Test persoon 5 (https://youtu.be/cv0DV_No_Xw?t=3m38s) 9. 5 van de 5 spelers dachten dat de achtergronden interactieve elementen bevatten. Bepaalde objecten in de achtergrond werden als opvallend beschouwd. (01:39 - 01:43 Test persoon 1 https://youtu.be/3p6Xhy-LeCo?t=1m39s)
(01:40 - 01:50 Test persoon 2 https://youtu.be/lQ8-y69f7UU?t=1m40s) (01:21 - 01:32 Test persoon 3 https://youtu.be/5vqbS9vhplI?t=1m21s) (01:22 - 01:30 Test persoon 4 https://youtu.be/YHTn0OpjOnU?t=1m22s) (01:22 - 01:28 Test persoon 5 https://youtu.be/cv0DV_No_Xw?t=1m22s)
10. 3 van de 5 spelers reageerden emotioneel op het spel. (Referentie Test persoon 5 - https://youtu.be/cv0DV_No_Xw?t=3m38s)
3:27 - Test persoon 1 (https://youtu.be/3p6Xhy-LeCo?t=3m27s) 4:22 -Testpersoon 3 (https://youtu.be/5vqbS9vhplI?t=4m19s)
OBSERVATIES
11. De interactie tussen de speler en de objecten in het spel verloopt op een soort automatische piloot omdat alles waar de speler naar kijkt automatisch gemanipuleerd word. De speler heeft niet veel invloed op het verloop van het spel. Hierdoor is het spel niet zeer uitdagend voor een jongere doelgroep. Voor ouderen die misschien in het begin nog moeite hebben met de besturing kan het interessant zijn, maar jongeren zijn te snel vaardig in het besturen van het spel.
De enige momenten dat je als speler nog enige invloed hebt op het spel en hierdoor enige uitdaging ervaart zijn de momenten bij het naar beneden moeten draaien van de brug en het “ontwijken” van de wolken. De interactie met de brug was enigszins interessant, omdat je door goed het interactie punt te volgen (de witte cirkel) je sneller de brug kon laten zakken.
De interactie met de wolken was nog iets interessanter omdat de speler niet precies wist wat hij/zij moest doen. Hierdoor kan enige verwarring ontstaan wat je precies moet doen. Omdat fouten slechts worden bestraft met 2-3 seconden wachten, krijg je als speler wel kans om de mechanic te gaan begrijpen.
Data Resultaten survey:
Tabel 1
Tabel 2
Zoals af te lezen uit deze enquête, hebben we een aantal dingen kunnen constateren. Zo bleek dat de game gemiddeld een 6.4 scoorde over de algehele ervaring. Daarnaast scoorde over het algemeen het besturingssysteem vrij laag, wat betekent dat men de besturing niet als geheel vanzelfsprekend ervoer. Desondanks gaven onze testpersonen over het algemeen wel aan dat je makkelijk uit de game kon, op uitzondering van één testpersoon. Verder scoorden de puzzels enorm laag op onze enquête, waardoor wij dit wel degelijk als problematisch aan stippen, zoals verder te lezen zal zijn in dit report.
DATA Naast het feit dat we veel relevante data hebben kunnen trekken uit de enquêtes voor onze ontwerp suggesties, hebben we ook een aantal belangrijke constateringen kunnen doen aan de hand van onze observaties, zoals geïllustreerd is in de grafieken die hieronder te vinden zijn.
Grafiek 1 Grafiek 2
Grafiek 3 Grafiek 4
Grafiek 5 Grafiek 6
*Grafiek 6 is op basis van vier moment opnames per persoon. Het gemiddelde in totaal was 17 milliseconden.
“PROBLEMEN” Volgens een van onze test doelen wilden wij weten hoe goed de game mechanics werken. Tijdens de observatie hebben wij bepaalde soorten gedrag gezien die onze vragen betreffend onze test doelen zouden kunnen beantwoorden (zie observatie en test doelen)
“Hoe lang doet een speler erover om erachter te komen hoe de interactie werkt?” Volgens de data(zie tabellen en grafieken) zijn wij erachter gekomen dat voor alle interactie een speler gemiddeld 240 seconden (precies 4 minuten) nodig heeft om de game te spelen. Een speler heeft dus minder dan 5 minuten nodig om te begrijpen wat elke interactie doet in het spel. Dit betekend dat het spel binnen de 5 minuten uit te spelen valt en begrijpbaar is voor onze doelgroep. De enige interactie die de testpersonen in verwarring bracht was de wolken die bliksems afschieten. (Zie observatie #6) Dit kan je erg goed zien aan grafiek 1 en 2 waarbij de gene die het langst over de game hebben gedaan, ook het meest naar de wolken hebben gekeken. Echter zie je wel dat de laatste persoon er iets langer over deed. Dit komt omdat hij zich expres liet pakken door een vogel in het laatste stuk van het level.
Resultaten survey vragen betreffend de game
“In hoeverre heeft de art invloed op de leesbaarheid van de mechanics?” In het begin bij het blokje ziet de testpersoon dat het object op de voorgrond staat in plaats van de achtergrond. Hierdoor kijkt men meteen naar het blokje en gaat het stuk. De speler beseft binnen een seconde dat hij het blokje kapot kan maken door te kijken naar het blokje. Dit wordt bewezen wanneer er twee blokjes verschijnen achter elkaar, na het eerste blokje.
Bij de vogel is de art niet belangrijk om de kijk mechanic te begrijpen. Dit komt door dat de vogel snel op het scherm te voorschijn komt en de speler meteen staart naar de vogel. Zo vliegt de vogel weg. Hierdoor snapt de speler na de eerste keer dat ze het hebben gedaan, dat de vogel weggejaagd wordt door er naar te kijken. Bij de tweede poging is de reactietijd van de speler sneller, omdat ze gewend zijn dat er een vogel kan komen en weggejaagd wordt als je naar hem kijkt.
Bij de tandwielen heeft de art veel invloed op het begrijpen van de kijk mechanic, volgens onze observatie. Door een wit rondje bij het tandwiel te zetten, die in contrast is met de zwarte achtergrond, kijken de spelers naar het lichte rondje. Ze beseffen dat het een beetje verschoven is en blijven staren naar het rondje. Het rondje beweegt in een cirkel beweging en de speler doet mee door met zijn ogen de cirkel te volgen. Door die cirkel beseft de speler dat hij/zij het tandwiel aan het draaien is. Als er geen witte cirkel was, zou de speler niet zeker zijn of hij/zij zelf het tandwiel draait of dat door zijn gestaar het tandwiel zelf draait.
“PROBLEMEN” Dit geldt ook voor het boot gedeelte. De boot heeft een cirkel met daarin een pijl die wijst naar de kant waar de speler de boot heen moet sturen. In het dagelijks leven wordt men geleid door pijlen overal waar ze naartoe gaan. Het is een gewoonte geworden, dus begrepen de spelers meteen dat als ze naar de cirkel staren dat de boot naar links zou gaan.
Afbeelding 4 - Interactie met de boot Als laatste heb je het wolken gedeelte, waar er geen verschil is tussen de interactieve art en de achtergrond art. Hierdoor besefte de spelers niet dat door te staren naar de wolken, de wolken bliksem gaven. Hierdoor is het onduidelijk naar de speler wat er aan de hand is.
Kortom, de art heeft weinig invloed gehad op de mechanics als het ging om automatische besturingen, zoals bij de vogels of de blokjes. Als er iets nieuws op het scherm komt dan keken alle testpersonen meteen naar dat nieuwe object, waardoor er een interactie ontstond met het object. Volgens onze observatie, waren de spelers vaak opzoek naar meer interactieve objecten, omdat de artstijl tussen de interactieve objecten en de achtergrond vrij weinig verschillen. Voor bepaalde dingen zoals het tandwiel en de boot is het handig geweest dat er een cirkel was die een richting aangaf voor de speler, maar als er niks op zou staan, dan zou de speler uiteindelijk vanzelf begrijpen wat die moest doen met het object, namelijk er naar kijken.
“Wat voor effect heeft de eyetracker op de algehele gameplay?” Omdat de eyetracker hetzelfde werk doet als een muis en vrij weinig toevoegd zeiden de testpersonen tijdens de nabesprekingen dat zij dit spel saai vonden omdat het meer leek op een interactieve film dan een echt spel. Wat ze ermee bedoelen is dat ze weinig uitgedaagd waren en vrij weinig konden doen met de eyetracker dan alleen kijken naar objecten.
Als tweede wilden wij kijken of de nieuwe doelgroep dit spel interessant vond en of er iets aangepast moest worden zo dat het spel leuker zou zijn voor de nieuwe doelgroep.
“Zijn de puzzels uitdagend genoeg?” Volgens de enquête scoorde de uitdaging van de puzzels 2/10, waarbij velen vroegen of er puzzels waren in het spel. Dit komt omdat de puzzels die in het spel bevinden meer obstakels zijn dan puzzels. Dit essentiële aspect aan de game werd dus consequent als niet uitdagend ervaren door onze doelgroep.
“Is de game makkelijk te begrijpen?” Volgens 4 van 5 testpersonen was het besturen van de game niet vanzelfsprekend, maar tijdens het spelen begrepen de testpersonen heel goed wat ze moesten doen. 4 van de 5 testers begrepen ook hoe zij uit de game konden gaan vanuit het start scherm en 5 van de 5 konden de game starten zonder moeite.
Ontwerp suggesties
Interactie in de game
Een tip voor de game designer: In het begin van het spel wordt het duidelijk aan de speler dat hij/zij moet kijken naar een object om een obstakel te overwinnen, maar bij de wolken is het kijken naar een wolk juist een hinder, waardoor dit obstakel niet aansluit met de vorige obstakels die er waren. Het is dus belangrijk om te weten of het obstakel wel aansluit bij wat de speler heeft geleerd tijdens het spelen.
Vogels
Een mogelijke aanpassing voor de interactie met de wolken in het spel, is dat je ernaar moet kijken zodat de wolken stoppen met bliksem afschieten, maar dit hangt af van wat de game designer precies wil bereiken met de mechanic. (Zie de tweede suggestie van de wolken bij art)
De spelers konden het ontwerp van de vogel niet zien, omdat de reactietijd van onze ogen heel snel zij. Dit betekend dat de aanval op de vogel een vertraging nodig heeft. Als de vogel te voorschijn komt, dan moet de speler ten minste 2 seconden lang staren voordat de vogel weggaat. Wat de speler dan ziet is een niet gevulde cirkel op de vogel (afbeelding 5). Als ze blijven staren naar de vogel vult de cirkel zich en als de cirkel vol is, vliegt de vogel weg (afbeelding 6). Zo blijft de vogel langer op het scherm en snapt de speler dat ze de vogel weg kunnen jagen als ze de cirkel hebben gevuld.
Afbeelding 5 - Speler kijkt Afbeelding 6 - Cirkel vol, vogel vliegt weg.
Art
Bij de wolken zou er een mogelijk verandering mogen plaatsvinden. Zo zou er bijvoorbeeld zich een gloed kunnen vormen rondom een wolk als de speler er naar kijkt. Zo begrijpen de spelers dat ze echt naar de wolken kijken en de bliksem ontstaat omdat ze naar de wolk kijken. Het zou dan lijken alsof de speler de wolk oplaad met elektriciteit.
Afbeelding 7 - Wolken lichten op als speler kijkt.
ONTWERP SUGGESTIES
Bij de andere art ligt het aan de game designer om te bepalen of het nodig is een betere aanwijzing te geven, zoals bij de tandwielen en de boot, en of hij de speler laat uitproberen wat hij/zij met het object kan doen. Dit heeft hij wel gedaan bij de wolken, maar omdat de wolken juist een ander soort obstakel waren dan de rest, voelde deze onverschilligheid tussen de achtergrond en de interactieve art als een hinder voor de speler om verder te kunnen spelen.
Gameplay
Puzzels
Puzzel 1 - Labyrint De eerste puzzel begint waar de speler vanuit zijn huis vertrekt. Onder de grond bevindt zich een labyrint met blokjes die je stuk kan maken. De spelers moeten voorzichtig zijn met welke blokjes ze kapot maken. Als ze eentje kapot maken en erin vallen naar verdieping 0, dan kan het zijn dat ze vast komen te zitten of helemaal terug moeten lopen naar het begin. De blokjes die ze kapot maken genereren weer na een tijdje terug, zo dat de speler niet weet waar die precies is, waardoor de weg terug vinden lastiger wordt.
Een mogelijke aanpassing zou kunnen zijn dat er échte puzzels in het spel komen. Tijdens de puzzels moeten de speler actief nadenken over wat ze moeten doen, waardoor het meer als een game aanvoelt dan als een film. Onze doelgroep was zeer ontevreden met de kwaliteit van de puzzels en de moeilijkheidsgraad ervan, zoals aangetoond met de resultaten van de survey. Een verbetering voor deze kwestie zou zijn om de puzzels uitdagender te maken, maar dan zou de andere doelgroep het misschien te moeilijk vinden. Je zou ook twee modes kunnen maken. Een easy mode en een hard mode, waarbij de hard mode uitgebreidere puzzels heeft die ook aansluiten bij de obstakels.
Afbeelding 8 - Overzicht Labyrint level
Afbeelding 9 - In game screenshot
Puzzel 2 - Friends and Foes Bij de vogel aanval bevinden zich nu een andere dier. De vlinder is een vriend van de mol. De speler moet proberen de vogel weg te jagen, maar hij mag de vlinder niet wegjagen. Dit betekent dat hij niet te lang naar de vlinder mag kijken of anders is die weg. Dit verhoogt de uitdaging in de game, wat precies is waar onze doelgroep naar vraagt (zoals survey aantoont)
ONTWERP SUGGESTIES
Afbeelding 10 - Onderscheid tussen vriend en vijand.
Puzzel 3 - Brug kapot Na dat de speler de brug omlaag doet met het tandwiel, gaat de brug stuk en de mol blijft doorlopen. De speler moet dus zo snel mogelijk de juiste stukken op de juiste plek zetten en de brug weer fixen voor dat de mol in het water valt. In dit stuk van het spel loopt de mol sneller dan normaal, waardoor de uitdaging groter is dan in de eerste instantie lijkt. Door naar een stukje te kijken kunnen ze die vasthouden en plaatsen op een plek van de brug. Er wordt dus als het ware gesleept met de omgeving doormiddel van de ogen.
Afbeelding 11 - Brug gedeelte van de game
Afbeelding 12 - Reparatie van de brug
SURVEY Na dat men de game gespeeld hadden kregen de test personen de mogelijkheid om een survey in te vullen. Hieruit hebben wij een hoop informatie kunnen halen die we hebben kunnen verwerken in de ontwerp suggesties en bij de problemen (bv: Ervaring mechanics, besturing, etc.). Hieronder de gebruikte survey.
ENQUETE BLIND LOVE PLAYTEST Template Algemene vragen Wat is je naam?
Wat is je leeftijd?
Ben je slechtziend?
Wat doe je in je vrije tijd?
Speel jij games, zo ja wat voor genre?
hoe lang spel jij games? (Kruis aan)
minder dan 2 uur per week
2 3 uur per week
3 5 uur per week
5 8 uur per week
meer dan 8 uur per week
SURVEY
SURVEY
BIJLAGE
Hierbij een lijst van de video’s, de datalogs en de ingevulde enquetes, ter ondersteuning van dit onderzoek.
Test persoon 1 https://www.youtube.com/watch?v=3p6Xhy-LeCo
Test persoon 2 https://www.youtube.com/watch?v=lQ8-y69f7UU
Test persoon 3 https://www.youtube.com/watch?v=5vqbS9vhplI
Test persoon 4 https://www.youtube.com/watch?v=YHTn0OpjOnU
Test persoon 5 https://www.youtube.com/watch?v=cv0DV_No_Xw
Datalog’s van playtest:
Test persoon 1 0:54 Maakt optionele blok niet kapot en neemt hierdoor de alternatieve route 1:57 Kijkt enig zins zoekend 2:55 Kijkt naar rechterkant vlot 3:28 Keek 8 keer naar de wolken 3:32 Glimlach na wolken deel.
Test persoon 2 0:54 Maakt optionele blok kapot 3:04 Kijkt naar rechterkant vlot 3:28 Keek 7 keer naar de wolken
Testpersoon 3 0:36 Vraagt naar cijfers in linkerbovenhoek 0:54 Maakt optionele blok kapot 2:50 Kijkt naar rechterkant vlot 3:28 Keek 26 keer naar de wolken 4:24 Vertedert door aftiteling filmpje
Video’s playtest:
BIJLAGE
Testpersoon 4 0:54 Maakt optionele blok kapot 2:43 Kijkt naar rechterkant vlot 3:28 Keek 6 keer naar de wolken 4:10 Krabt aan z’n neus
Testpersoon 5 0:54 Maakt optionele blok kapot 3:28 Keek 14 keer naar de wolken 3:38 Word gepakt door een vogel. 4:20 Experimenteert met wat er gebeurt als je wegkijkt
Bijlage ENQUETE BLIND LOVE PLAYTEST #1 Algemene vragen Wat is je naam? Milou Verbeeke
Wat is je leeftijd? 20
Ben je slechtziend? nee
Wat doe je in je vrije tijd? Niet zo veel; buiten zijn, gamen
Speel jij games, zo ja wat voor genre? Soms, rpg’s
hoe lang spel jij games? (Kruis aan)
minder dan 2 uur per week
x
2 3 uur per week
3 5 uur per week
5 8 uur per week
meer dan 8 uur per week
BIJLAGE
Wat is je favoriete game? Sims 3
Vragen over de game Wat vond je van de game? (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed) Toelichting: De besturing is het grootste pluspunt, verder is de game niet heel bijzonder.
Was deze manier van besturen voor jou een vanzelfsprekende manier? Ja / Nee Toelichting: Ik had totaal niet verwacht dat het besturen met je ogen ging.
Was het menu makkelijk te hanteren met dit besturingssysteem? (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed) Toelichting: Ik kon niet alles goed lezen, want dan zou ik die opties selecteren.
Vond je dat de besturingssysteem essentieel was voor de game? (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed) Toelichting: Ik had deze game ook met de muis kunnen spelen, maar dan was het een saaie game geweest.
Bijlage
Kon je makkelijk uit de game gaan? Ja / Nee Toelichting: Er had een kijkknopje voor ‘escape’ moeten zijn, want toen de credits eenmaal kwamen moest ik wachten tot die afgelopen waren.
Vond je de puzzels uitdagend genoeg? (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed) Toelichting: De puzzels waren erg simpel.
Kon je onderscheid maken tussen obstakels en omgeving? (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed) Toelichting: Onderscheid was erg makkelijk te maken.
Vond je dat de besturing passend was voor de betreffende obstakels? Muur: (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed) Vogels: (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed) (de vogels gingen te snel uit beeld. Ik had ze graag willen zien, maar omdat mijn ogen automatisch bewegen naar een punt dat ineens verschijnt, waren ze gelijk weg). Tandwielen: (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed) Bootje: (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed) Wolken: (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed)
BIJLAGE ENQUETE BLIND LOVE PLAYTEST #2 Algemene vragen Wat is je naam? Ivana Tjong A Hung
Wat is je leeftijd? 17
Ben je slechtziend? Ja, sterkte -4.75 dpt.
Wat doe je in je vrije tijd? Series kijken, gamen, (fictie) schrijven
Speel jij games, zo ja wat voor genre? Ja ik speel games, vooral (j)rpgs.
hoe lang spel jij games? (Kruis aan)
minder dan 2 uur per week
2 3 uur per week
x
3 5 uur per week
5 8 uur per week
meer dan 8 uur per week
BIJLAGE
Wat is je favoriete game? Persona 3
Vragen over de game Wat vond je van de game? Slecht 0 1 2 3 4 5 6 7 8 9 10 zeer goed Toelichting: 7, het was wel een leuke tijdsbesteding, maar heel casual. Het was niet heel intensief.
Was deze manier van besturen voor jou een vanzelfsprekende manier? Ja / Nee Toelichting: Nee, je hebt eigenlijk het gevoel dat je niet echt iets aan het doen bent qua besturing, omdat je gewoon aan het kjiken bent. Het voelde een beetje raar.
Was het menu makkelijk te hanteren met dit besturingssysteem? Slecht 0 1 2 3 4 5 6 7 8 9 10 zeer goed Toelichting: 7, het was redelijk.
Vond je dat de besturingssysteem essentieel was voor de game? Slecht 0 1 2 3 4 5 6 7 8 9 10 zeer goed Toelichting: 6. Het voegde wel iets toe, maar het was niet essentieel. Het kijken kon ook vervangen worden door klikken met de muis.
BIJLAGE
Kon je makkelijk uit de game gaan? Ja / Nee Toelichting: Ja
Vond je de puzzels uitdagend genoeg? Slecht 0 1 2 3 4 5 6 7 8 9 10 zeer goed Toelichting: 0, er was niet echt een uitdaging.
Kon je onderscheid maken tussen obstakels en omgeving? Slecht 0 1 2 3 4 5 6 7 8 9 10 zeer goed Toelichting: 9, meestal was het wel duidelijk.
Vond je dat de besturing passend was voor de betreffende obstakels? Muur: 6. Je keek in het algemeen gewoon voor de mol uit, en de muren waren hierdoor nauwelijks een obstakel, omdat ze makkelijk breekte. (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed) Vogels: 9. De vogels wegjagen door naar ze te kijken was wel leuk. (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed) Tandwielen: 9. Het wiel was wel het meest uitdagende van de verschillende obstakels. (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed) Bootje: 6. Ook bij het bootje kijk je gewoon automatisch vooruit, waardoor ook dit niet echt voelde als een obstakel. (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed) Wolken: 4. De wolken waren een beetje onduidelijk. Het was niet heel duidelijk wanneer de storm je bootje wel of niet raakte. De besturing van het bootje was in principe hetzelfde, maar je bewoog ietsjes slomer vooruit. (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed)
BIJLAGE ENQUETE BLIND LOVE PLAYTEST #3 Algemene vragen Wat is je naam? Mária van den Heuvel
Wat is je leeftijd? 18
Ben je slechtziend? nee
Wat doe je in je vrije tijd? paardrijden, naar het strand
Speel jij games, zo ja wat voor genre? gezelschapsspelletjes zoals kolonisten van katan, risk, monopoly, uno, hartenjagen. Ook speel ik bijna dagelijks mario kart op de wii.
hoe lang spel jij games? (Kruis aan)
minder dan 2 uur per week
2 3 uur per week
x
3 5 uur per week
5 8 uur per week
meer dan 8 uur per week
BIJLAGE
Wat is je favoriete game? mario kart wii
Vragen over de game Wat vond je van de game? Slecht 0 1 2 3 4 5 6 7 8 9 10 zeer goed Toelichting: leuke tekeningen, fijne muziek, bij het regenachtige deel was het geluid iets te hard in vergelijking met de rest van de game. spel legt zichzelf uit, makkelijk te begrijpen.
Was deze manier van besturen voor jou een vanzelfsprekende manier? Nee Toelichting: ik zie deze manier van besturen voor het eerst, heel leuk om eens te doen.
Was het menu makkelijk te hanteren met dit besturingssysteem? Slecht 0 1 2 3 4 5 6 7 8 9 10 zeer goed Toelichting: menu volgde mijn ogen wel goed, maar klikte de optie te snel aan, ik heb meer tijd nodig om alle opties eerst rustig te kunnen lezen.
Vond je dat de besturingssysteem essentieel was voor de game? Slecht 0 1 2 3 4 5 6 7 8 9 10 zeer goed Toelichting: ja, anders zou het te saai zijn. dit besturingssysteem is nieuw voor mij en ik vond het interessant om met deze game te testen, als ik deze game met bijv. een muis zo testen zou het te langzaam voor mij gaan.
BIJLAGE
Kon je makkelijk uit de game gaan? Ja Toelichting: na de credits kwam je vanzelf weer bij het hoofdmenu en kon ik op quit klikken/naar quit kijken
Vond je de puzzels uitdagend genoeg? Slecht 0 1 2 3 4 5 6 7 8 9 10 zeer goed Toelichting: de puzzels waren erg simpel, maar wel leuk omdat je ze met je ogen moest oplossen
Kon je onderscheid maken tussen obstakels en omgeving? Slecht 0 1 2 3 4 5 6 7 8 9 10 zeer goed Toelichting: er was genoeg contrast
Vond je dat de besturing passend was voor de betreffende obstakels? Muur: (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed) Vogels: (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed) Tandwielen: (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed) Bootje: (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed) Wolken: (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed)
BIJLAGE ENQUETE BLIND LOVE PLAYTEST #4 Algemene vragen Wat is je naam? Kevin van Wijk
Wat is je leeftijd? 26
Ben je slechtziend? Nee
Wat doe je in je vrije tijd? Tekenen, lezen, film kijken, gamen
Speel jij games, zo ja wat voor genre? Ja. Story based games, shooters
hoe lang spel jij games? (Kruis aan)
minder dan 2 uur per week
X
2 3 uur per week
3 5 uur per week
5 8 uur per week
meer dan 8 uur per week
BIJLAGE
Wat is je favoriete game? Bioshock
Vragen over de game Wat vond je van de game? Slecht 0 1 2 3 4 5 6 7 8 9 10 zeer goed Toelichting: De besturing maakt het interessant, maar de inhoud van de game spreekt mij niet zo aan.
Was deze manier van besturen voor jou een vanzelfsprekende manier? Ja / Nee Toelichting: Je bent geneigd te kijken naar objecten die eruit springen. Daardoor ging het allemaal redelijk vanzelf
Was het menu makkelijk te hanteren met dit besturingssysteem? Slecht 0 1 2 3 4 5 6 7 8 9 10 zeer goed Toelichting: Nvt
Vond je dat de besturingssysteem essentieel was voor de game? Slecht 0 1 2 3 4 5 6 7 8 9 10 zeer goed Toelichting: Nee, dit kan net zo goed met muis of touch gedaan worden
BIJLAGE
Kon je makkelijk uit de game gaan? Ja / Nee Toelichting: Het is redelijk gebruikelijk om ESC te gebruiken.
Vond je de puzzels uitdagend genoeg? Slecht 0 1 2 3 4 5 6 7 8 9 10 zeer goed Toelichting: Welke puzzels?
Kon je onderscheid maken tussen obstakels en omgeving? Slecht 0 1 2 3 4 5 6 7 8 9 10 zeer goed Toelichting: Die sprongen er wel uit
Vond je dat de besturing passend was voor de betreffende obstakels? Muur: (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed) Vogels: (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed) Tandwielen: (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed) Bootje: (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed) Wolken: (Slecht) 0 1 2 3 4 5 6 7 8 9 10 (Zeer goed)
BIJLAGE ENQUETE BLIND LOVE PLAYTEST #5 Algemene vragen Wat is je naam? Jente Zandstra
Wat is je leeftijd? 27
Ben je slechtziend? nee
Wat doe je in je vrije tijd? Wiskunde, DHZ, Lezen, Elektro
Speel jij games, zo ja wat voor genre? ja,strategie
hoe lang spel jij games? (Kruis aan)
minder dan 2 uur per week
2 3 uur per week
X
3 5 uur per week
5 8 uur per week
meer dan 8 uur per week
BIJLAGE
Wat is je favoriete game? schaak
Vragen over de game Wat vond je van de game? Slecht 0 1 2 3 (4) 5 6 7 8 9 10 zeer goed Toelichting: weinig interactie
Was deze manier van besturen voor jou een vanzelfsprekende manier? Ja / (Nee) Toelichting: het was niet mogelijk te kijken zonder dat dit acties startte
Was het menu makkelijk te hanteren met dit besturingssysteem? Slecht 0 (1) 2 3 4 5 6 7 8 9 10 zeer goed Toelichting: zie boven: lezen was niet goed van selecteren gescheiden
Vond je dat de besturingssysteem essentieel was voor de game? Slecht 0 1 (2) 3 4 5 6 7 8 9 10 zeer goed Toelichting: misschien dat het afleidde van de beperkte invloed die de speler op het spel heeft
BIJLAGE
Kon je makkelijk uit de game gaan? (Ja) / Nee Toelichting: [esc]. In windows kan altijd op [alt]+[F4] worden vertrouwd.
Vond je de puzzels uitdagend genoeg? Slecht (0) 1 2 3 4 5 6 7 8 9 10 zeer goed Toelichting: ik elk obstakel desintegreerde zodra ik het zag.
Kon je onderscheid maken tussen obstakels en omgeving? Slecht (0) 1 2 3 4 5 6 7 8 9 10 zeer goed Toelichting: zie boven
Vond je dat de besturing passend was voor de betreffende obstakels? Muur: (Slecht) 0 1 2 3 4 5 (6) 7 8 9 10 (Zeer goed) Vogels: (Slecht) 0 1 2 3 4 5 6 7 8 (9) 10 (Zeer goed) Tandwielen: (Slecht) 0 1 2 3 4 5 6 7 (8) 9 10 (Zeer goed) Bootje: (Slecht) 0 1 2 3 4 5 6 (7) 8 9 10 (Zeer goed) Wolken: (Slecht) 0 1 2 3 (4) 5 6 7 8 9 10 (Zeer goed)