Testování ovládání hry FIFA 15 TUR semestrální práce B
Matěj Klíma 3. ledna 2016 Obsah 1 Úvod 1.1 Popis testované aplikace . . . . . . . . . . . . . . . . . . . . . . . . 1.2 Nastavení aplikace . . . . . . . . . . . . . . . . . . . . . . . . . . . 1.3 Cílová skupina . . . . . . . . . . . . . . . . . . . . . . . . . . . . .
2 2 2 3
2 Specifikace testu 2.1 Metrika testování . . . . . . . . . . . . . . . . . . . . . . . . . . . . 2.2 Použitá metoda testu . . . . . . . . . . . . . . . . . . . . . . . . . . 2.3 Nulová hypotéza . . . . . . . . . . . . . . . . . . . . . . . . . . . .
3 3 3 3
3 Testování 3.1 Postup sběru dat 3.2 Získaná data . . 3.3 Zpracování dat . 3.4 Výsledek . . . . .
4 4 4 4 4
. . . .
. . . .
. . . .
. . . .
. . . .
. . . .
. . . .
. . . .
4 Závěr
. . . .
. . . .
. . . .
. . . .
. . . .
. . . .
. . . .
. . . .
. . . .
. . . .
. . . .
. . . .
. . . .
. . . .
. . . .
. . . .
. . . .
. . . .
. . . .
. . . .
4
1
TUR B - Ovládání FIFA 15
Matěj Klíma
[email protected]
1 Úvod 1.1 Popis testované aplikace Ve své semestrální práci porovnávám dva způsoby ovládání fotbalového simulátoru FIFA 15, a to konkrétně ovládání ”dotykem”oproti virtuálnímu joysticku. Pro test použitelnosti daného způsobu ovládání budu měřit časy vstřelení gólů a počet vstřelených a obdržených branek. Hra byla testována ve verzi pro zařízení se systémem iOS, konkrétně na tabletu iPad Mini od společnosti Apple Inc.
Obrázek 1: Screenshot dvou způsobů ovládání, virtuálního joysticku a ovládání dotykem Fotbalové simulátory označené štítkem ”FIFA”vydává společnost Electronic Arts Inc. v nové verzi každý rok nepřetržitě již od roku 1993. Jedině hra od tohoto výrobce se může pochlubit oficiální licencí od Mezinárodní federace fotbalových asociací FIFA, což jí umožňuje používat jména reálných fotbalových klubů, soutěží i hráčů. [2]
1.2 Nastavení aplikace Všichni testovaní uživatelé odehráli zápas mužstev Manchester United (hráč) proti Manchester City (počítač), tedy týmů z anglické Premier Ligue. Abych stihl otestovat co nejvíce uživatelů a je aby to nepřestalo bavit, nastavil jsem délku trvání jednoho poločasu na co nejkratší možnou dobu, tedy na 2 minuty. Trochu oříškem bylo nastavení obtížnosti. Aby měl výsledek testu vypovídající hodnotu, potřeboval jsem aby padaly góly a já tak měl co porovnávat. Rozvažoval jsem tedy mezi úrovní nejlehčí a nejobtížnější. Vzhledem k tomu, že však testovaní uživatelé FIFu ještě nikdy nehráli, a že po skončení testu by měli být spíše spokojenější z vysoké výhry, než nespokojení z drtivé prohry, nastavil jsem obtížnost pro
2
TUR B - Ovládání FIFA 15
Matěj Klíma
[email protected]
každého na tu nejlehčí (beginner). Z toho občas pramenily některé vtipné situace, kdy byl například protihráčův gólman schopný pustit gól i z poloviny hřiště, a také bylo možné bez problému jedním hráčem ”dosprintovat”od své brány až k soupeřově a dát gól bez toho, aby se mu protihráč snažil míč vzít.
1.3 Cílová skupina Cílovou skupinu tvořili lidé, kteří měli zkušenosti s ovládáním tabletu a kteří na něm již někdy hráli nějakou hru. Naopak vylučovací podmínkou bylo, když uživatel již někdy hru hrál. Testovaní uživatelé byli ve věku od 17 do 39 let a vzhledem k povaze hry (fotbalový simulátor) převažovali muži.
2 Specifikace testu 2.1 Metrika testování 1. Nezávislé proměnné Tedy proměnné, které můžeme ovlivnit • Způsob ovládání (virtuální joystick oproti ovládání dotykem) 2. Závislé proměnné Tedy proměnné, které se mění v závislosti na nastavení nezávislých proměnných • Počet vstřelených branek1
2.2 Použitá metoda testu Pro zhodnocení sebraných dat jsem použil dvojvýběrový párový T-Test. Tato statistická metoda se dá použít pro porovnání dvou nezávislých množin s výsledky (za předpokladu, že jsou data v množinách distribuována v normálním rozdělení), kdy pro každý testovaný subjekt máme výsledek obou testů. Výsledkem tohoto testu je číslo, které vyjadřuje s jakou pravděpodobností můžeme říct, že se dané dvě množiny liší [3].
2.3 Nulová hypotéza Ovládání pomocí virtuálního joysticku se výrazně neliší od ovládání dotykem, tedy zápasy odehrané různým způsobem ovládání skončily podobným výsledkem. 1
Pro test jsem počítal pouze s počtem vstřelených gólů, obdržené jsem vzhledem k jejich bezvýznamnému počtu zanedbal.
3
TUR B - Ovládání FIFA 15
Matěj Klíma
[email protected]
3 Testování 3.1 Postup sběru dat Každého participanta jsem krátce seznámil se způsobem ovládání hry, ukázal mu jak se dělají základní činnosti (měnit směr pohybu hráčů, střílet, přihrávat...) a poté ho nechal aby odehrál danou variantu ovládání. Co nejdříve po skončení jednoho zápasu následoval zápas odehraný druhým způsobem ovládání, před kterým proběhlo opět krátké seznámení s ovládáním. Pořadí obou způsobů jsem střídal, abych vykompenzoval učící křivku. Naprosté většině participantů se testování líbilo a často měli zájem o jeho opakování.
3.2 Získaná data viz. Tabulka se získanými daty.
3.3 Zpracování dat Do prvního t-testu jsem dosadil počet vstřelených branek v obou způsobech ovládání
3.4 Výsledek Pro vypočítání hodnoty p v t-testu jsem využil funkci t.test v prostředí R. Z počtu vstřelených branek vyšlo párovým t-testem t(14) = 2.2255, p = 0,04299. Z testu vychází, že p je menší než hladina významnosti p < 0.05 a proto nulovou hypotézu zamítáme.
4 Závěr Před začátkem testování jsem předpokládal, že se bude uživatelům mnohem snadněji používat ovládání virtuálním joystickem, a že výsledky zápasů odehraných tímto způsobem to budou potvrzovat. Po odehrání obou zápasu jsem se vždy testovaných zeptal, který způsob ovládání se jim používal lépe. Z tohoto mini dotazníku vyšlo jednoznačně najevo, že v prvním předpokladu jsem se nemýlil - participanti opravdu označili způsob ovládání virtuálním joystickem za uživatelsky příjemnější (konkrétně v poměru 9:6). Ve druhém předpokladu jsem se ovšem mýlil, což odhalil výsledek t-testu. Ten vypovídá o tom, že se od sebe dva testované způsoby ovládání hry FIFA sice opravdu liší, avšak oproti mému předpokladu také ukázal, že je pro ně snadnější dávat góly ovládáním pomocí dotyku.
4
TUR B - Ovládání FIFA 15
Matěj Klíma
[email protected]
Obrázek 2: Tabulka se získanými daty
Reference [1] SPORKA, A. Quantitative Testing I. + II. Přednáška předmětu TUR, DEPARTMENT OF COMPUTER GRAPHICS AND INTERACTION, ČVUT, Praha 2013. [2] FIFA: (video game series). Wikipedia: the free encyclopedia [online]. San Francisco (CA): Wikimedia Foundation, 2001-, 2015-12-25 [cit. 2015-12-28]. Dostupné z: en.wikipedia.org/wiki/FIFA_(video_game_series) [3] Parametrické testy: Studentův t-test. Multimediální pomůcky na VFU [online]. Brno: VFU Brno, 2012, 2012-07-25 [cit. 2015-12-28]. Dostupné z: cit.vfu.cz/ statpotr/POTR/Teorie/Predn3/ttest.htm
5
