Pavel Chráska
A7B39TUR
České vysoké učení technické v Praze Fakulta elektrotechnická
Testování přenosné konzole PSP (Semestrální projekt z předmětu TUR)
Vypracoval Pavel Chráska
1
Pavel Chráska
A7B39TUR
Obsah Úvod ........................................................................................................................................................ 3 Popis přístroje...................................................................................................................................... 3 Popis cílové skupiny uživatelů ............................................................................................................. 3 Přehled Use cases .................................................................................................................................... 4 Připojení k internetu............................................................................................................................ 4 Přehrávání filmů .................................................................................................................................. 4 Nastavení Času .................................................................................................................................... 4 Uložení internetových stránek mezi oblíbené..................................................................................... 4 Návrh testů bez uživatele ........................................................................................................................ 5 Provedení testů bez uživatele ................................................................................................................. 6 Připojení k internetu............................................................................................................................ 6 Jednotlivé kroky............................................................................................................................... 6 Testovací tabulka ............................................................................................................................. 9 Odhalené chyby ............................................................................................................................... 9 Přehrávání filmů ................................................................................................................................ 10 Odhalené chyby ............................................................................................................................. 10 Nastavení Času .................................................................................................................................. 11 Jednotlivé kroky............................................................................................................................. 11 Testovací tabulka ........................................................................................................................... 12 Odhalené chyby ............................................................................................................................. 12 Uložení internetových stránek mezi oblíbené................................................................................... 13 Jednotlivé kroky............................................................................................................................. 13 Testovací tabulka ........................................................................................................................... 14 Odhalené chyby ............................................................................................................................. 14 Shrnutí testování ................................................................................................................................... 14
2
Pavel Chráska
A7B39TUR
Úvod Popis přístroje Psp je kapesní herní konzole od Sony.V dnešní době existují 4 verze, první PSP Fat ( PSP-1000) byla vydána společností Sony 1. září 2005 v Evropě , druhá, výrazně vylepšená verze PlayStation Portable Slim & Lite ( PSP-2000) v září 2007 , třetí PSP 3000 15.října 2008 a nakonec PSP Go 1.října 2009, které se od předchozích verzí výrazně liší odsouvacím displejem a absencí UMD mechaniky. PSP Go nemá za cíl nahradit PSP 3000, které se i nadále vyrábí, PSP Go je stylová alternativa.Pro toto testování je vybraná konzole psp 2000,jelikož je zdaleka nejrozšířenější. Psp využívá TA-085 PCB motherboard, kapacita RAM je 64 MB Přepínač WLAN/Wi-Fi se přesunul na vršek konzole k UMD mechanice, UMD díky novému přepracování je nutné disk po odjištění mechaniky vysunout ven ručně. Jako datové médium konzole používá UMD disky a paměťové karty Memory Stick Pro Duo. Konzole je poháněna procesorem R4000 at 1~333 MHz.
Obr.1 Popis konzole
Popis cílové skupiny uživatelů Cílová skupina mého testování je člověk,okolo 16 let,dnešní generace,této věkové skupiny je značně znalá informační technologií,pro mé testování bude ale průměrný uživatel neznalí ovládání konzolí ,tuto skupinu jsem si vybral protože tuto konzole bude vlastnit většinou právě tato skupina.
3
Pavel Chráska
A7B39TUR
Přehled Use cases Připojení k internetu Konzole má wi-fi a tudíž je tu možnost se připojit k internetu.V tomto use case projdu standartní proceduru od vyhledání wifi sítě přes nastavení až k uložení sítě pro pozdější automatické připojení. Test bude provedem kognitivním průchodem.
Přehrávání filmů Časem po upgradech firmware začala konzole kromě klasické mp4 podporovat i mnoho různých video souborů proto tento test bude zaměřen na samotné přehrávání filmů a interní psp přehrávač. Test bude proveden heuristickou evaluací.
Nastavení Času Klasické nastavení času v konzolovém menu.Test bude proveden kognitivním průchodem.
Uložení internetových stránek mezi oblíbené Jak již bylo řečeno konzole má možnost připojení k internetu,což znamená že má i internetový prohlížeč.Test bude v interním internetovém prohlížeči. Test bude provedem kognitivním průchodem.
4
Pavel Chráska
A7B39TUR
Návrh testů bez uživatele Kognitivní průchod je metoda testování uživatelského rozhraní,při které se tester snaží vidět a posuzovat věci očima uživatel.Cílem této metody je zjistit, zda je uživatel schopen zvládnout daný scénář, případně kde a jak se od optimálního průchodu odchyluje. V každém kroku si testující klade tyto otázky: • Q1: Bude uživateli zřejmé, co má dělat? • Q2: Spojí si uživatel správně popisek akce se svým cílem? • Q3: Dostane uživatel dostatečný feedback? Na začátku každého případu použití se klade otázka Q0: Čeho chce uživatel dosáhnout? Heuristická analýza je jedna ze základních metod testování použitelnosti. Spočívá v procházení a testovacího programu stránek odborníky na použitelnost. Odborníci zkoumají, jestli program splňuje jednotlivá doporučení ohledně použitelnosti. Na konci je vytvořen seznam problémů a nedostatků řazený podle důležitosti.Já konkrétně použiji heuristiku dle Jacoba Nielsena. 1. Viditelnost stavu systému 2. Spojení mezi systémem a reálným světem 3. Uživatelovo řízení a svoboda 4. Konzistentnost a standarty 5. Prevence chyb 6. Minimalizování zátěže uživatelovi paměti 7. Efektivita a flexibilita užívání 8. Minimalistický design 9. Pomoc uživateli rozpoznat a opravit chybu 10. Pomoc a dokumentace
5
Pavel Chráska
A7B39TUR
Provedení testů bez uživatele Připojení k internetu Jednotlivé kroky Krok 1 Chceme nastavit nové připojení Otázka Q1 Q2 Q3
Odpověď Ano Ano Ano
Najít síť Otázka Q1 Q2 Q3
Odpověď Ano Ne* Ano
Obr 2.Nové připojení Krok 2
*Uživatel je zvyklí na potvrzování nastavení herním tlačítkem x,zde je potvrzení x sice lze, ale nikde není naznačeno že to tak lze
Obr 3.Metoda pro najití SSID Krok 3 Vybrat síť Otázka Odpověď Q1 Ano Q2 Ano Q3 Ne* *Uživatel se dostane na obrazovku přejmenování SSID,tzn. Vytvoření přezdívky pro SSID,je to zbytečné vzhledem k možnosti přejmenovat nastavení
Obr 4.Výběr sítě
6
Pavel Chráska
A7B39TUR
Krok 4 Vytvoření přezdívky Otázka Odpověď Q1 Ne* Q2 Ano Q3 Ano *Uživateli nemusí být jasné že se jedná o vytvoření přezdívky pro SSID,je to zbytečné,obrazovka spíše vypadá jako informace o SSID
Obr 5.Vytvoření přezdívky SSID Krok 5 Výběr zabezpečení sítě Otázka Odpověď Q1 Ano Q2 Ano Q3 Ano
Obr 6.Výběr security protokolu Krok 6 Zadání hesla k síti Otázka Odpověď Q1 Ano Q2 Ano Q3 Ano
Obr 7.Zadání klíče
7
Pavel Chráska
A7B39TUR
Krok 6b Zadání klíče Otázka Odpověď Q1 Ano Q2 Ano Q3 Ano
Obr 8.Zadání klíče Krok 6c Zadání klíče Otázka Odpověď Q1 Ano Q2 Ano Q3 Ano
Obr 9.Zadání klíče Krok 7 Potvrzení údajů Otázka Odpověď Q1 Ano Q2 Ano Q3 Ano
Obr 10.Kontrola údajů Krok 8 Konečné uložení údajů Otázka Odpověď Q1 Ano Q2 Ano Q3 Ano
Obr 11.Uložení
8
Pavel Chráska
A7B39TUR Konečná obrazovka nastavení internetového připojení s již vytvořeným profilem pro síť Homewifi.
Obr 12.Závěrečná obrazovka Testovací tabulka Část průchodu Nové připojení Jak najít SSID Výběr sítě Vytvoření přezdívky SSID Výběr protokolu Zadání klíče a) Zadání klíče b) Zadání klíče c) Kontrola údajů Uložení
Q1 Ano Ano Ano Ne Ano Ano Ano Ano Ano Ano
Q2 Ano Ne Ano Ano Ano Ano Ano Ano Ano Ano
Q3 Ano Ano Ne Ano Ano Ano Ano Ano Ano Ano
Odhalené chyby Během testování byli nalezeny 3 chyby, konkrétně v části Jak najít SSID, Výběr sítě a Vytvoření přezdívky všechny 3 byli málo závažné.
9
Pavel Chráska
A7B39TUR
Přehrávání filmů
Obr 13. No info
Obr 15.Info 2
Obr 14.Info 1 Odhalené chyby
Porušení heuristiky číslo 1,tzn.Viditelnost stavu systému. Ikdyž je u přehrávačů žádoucí aby zobrazovali co nejméně událostí, alespoň při nějaké změně v ovládání(pohyb kursoru, stisknutí tlačítka,atd) by se měla zobrazit lišta se stavem přehrávaného souboru(délka aktuální čas,název,atd) . Info zobrazené na Obr 15. je zobrazené pořád dokud ho uživatel neodnastaví v nastavení na Obr 14. . Porušení heuristiky číslo 6,uživatel si musí pamatovat jaké tlačítko je tzv. potvrzující a jaké je rušící. Uživatel musí i při zobrazení stavu přehrávaného souboru vědět jakým tlačítkem se přetáčí, zpomaluje rychlost přehrávání atd., kompletní ovládání je dostupné pouze v manuálu, uživatel nedostane žádnou nápovědu jak například zrušit pauzu a obnovit přehrávání. První chyba je mírně závažná jelikož pouze zhoršuje pohodlí při přehrávání, ale druhá chyba zásadně zhoršuje možnost přehrávání videosouborů pro začínajícího a středně pokročilého uživatele.
10
Pavel Chráska
A7B39TUR
Nastavení Času Jednotlivé kroky Krok 1 Položka menu setting Otázka Odpověď Q1 Ano Q2 Ne* Q3 Ano *Uživateli nemusí být jasné že se v systému pohybuje směrovými šipkami doleva a doprava a ne třeba analogovou páčkou nebo klávesami L a R, uživatel dále neví čím má volbu potvrdit
Obr 16. Menu Krok 2 Menu Data a času Otázka Odpověď Q1 Ano Q2 Ne* Q3 Ano *Uživateli nemusí být jasné že se v systému pohybuje směrovými šipkami dolů a nahoru a ne třeba analogovou páčkou nebo klávesami L a R, uživatel dále neví čím má volbu potvrdit
Obr 17.Menu nastavení Krok 3 Nastavení Data a času Otázka Odpověď Q1 Ano Q2 Ne* Q3 Ano *Uživateli nemusí být jasné že se v systému pohybuje směrovými šipkami dolů a nahoru a ne třeba analogovou páčkou nebo klávesami L a R, uživatel dále neví čím má volbu potvrdit
Obr 18.Menu nastavení času
11
Pavel Chráska
A7B39TUR
Krok 4 Jak čas nastavit Otázka Odpověď Q1 Ne* Q2 Ano Q3 Ano *Chybí popisek akce,uživatel neví co nastavit manuálně či přes internet
Obr 19.Jak nastavit čas Krok 5 Manuální nastavení Otázka Odpověď Q1 Ano Q2 Ne* Q3 Ano *Chybí tlačítko na ukončení akce,některým uživatelům nemusí dojít že změna času se provádí šipkou nahoru a dolů
Obr 20. Nastavení času Testovací tabulka Část průchodu Položka menu setting Menu Data a času Nastavení Data a času Jak čas nastavit Manuální nastavení
Q1 Ano Ano Ano Ne Ano
Q2 Ne Ne Ne Ano Ne
Q3 Ano Ano Ano Ano Ano
Odhalené chyby Během testu jsem nalezl 5 chyb,4 z nich spolu úzce souvisí, jedná se o absenci nápovědy ovládání, jedná se o mírně závažné chybi, které znesnadňují uživateli průchod akcí. Poslední chyba je absence informace o stavu systému ,je to také mírně závažná chyba.
12
Pavel Chráska
A7B39TUR
Uložení internetových stránek mezi oblíbené Jednotlivé kroky Krok 1 Otevření stránky Otázka Odpověď Q1 Ano Q2 Ne* Q3 Ano *Chybí nápověda ke tlačítkům,uživatel neví co zmáčknout
Obr 20.Načtení stránky Krok 2 Menu internetového prohlížeče Otázka Odpověď Q1 Ano Q2 Ne* Q3 Ano *Chybí nápověda ke tlačítkům,uživatel neví co zmáčknout
Obr 21.Menu Krok 3 Menu oblíbené Otázka Odpověď Q1 Ne* Q2 Ano Q3 Ano *Není zde ikona pro uložení do oblíbených, uživatel neví jak dál
Obr 22.Menu oblíbených Krok 4 Oblíbené Otázka Odpověď Q1 Ano Q2 Ano Q3 Ne* *Stránka na obr.23 obsahuje seznam oblíbených plus záložky přidat do oblíbených, když na ni uživatel klikne otevře se mu seznam právě otevřených stránek, který ale vypadá pouze jako další již oblíbená položka.
13
Pavel Chráska
A7B39TUR
Obr 23. Oblíbené Krok 5 Přidávání mezi oblíbené Otázka Odpověď Q1 Ne* Q2 Ano Q3 Ne** *Uživatel neví zdali je stránka google kterou chce přidat již není mezi oblíbenými. **Uživatel nedostane žádnou hlášku o tom zda byla stránka úspěšně přidána, pouze se vrátí na otevřenou stránku
Obr 24.Přidávání mezi oblíbené Testovací tabulka Část průchodu Otevření stránky Menu internetového prohlížeče Menu oblíbené Oblíbené Přidávání mezi oblíbené
Q1 Ano Ano Ne Ano Ne
Q2 Ne Ne Ano Ano Ano
Q3 Ano Ano Ano Ne Ne
Odhalené chyby Během testu jsem našel značné množství chyb. První 2 chyby jsou mírně závažné a jsou způsobeny chybějící nápovědou k ovládání. Chyba v menu oblíbené je způsobena špatným popiskem a není závažná. Poslední 3 chyby jsou značně závažné protože prakticky znemožňují pozorovat stav ukládání stránky mezi oblíbené.
Shrnutí testování Během testování jsem našel několik závažných chyb a celkem velké množství drobných chyb způsobených absencí nápovědy k ovládání. Tato absence je především daná cílovou skupinou uživatelů psp, která je obeznámena s konceptem ovládání rodiny konzolí playstation. Toto ovládání je v EU regionu založeno na klasické trojici křížek-potvrzení, kolečko-zrušení a trojúhelníček-nastavení, zatímco v Japonsku je to křížek- zrušení, kolečko-potvrzení a trojúhelníček-nastavení, proto jsem tyto chyby zařadil do mírně závažných. Chyby v Use-casu přehrávání filmů jsou závažné a pro nápravu bych doporučil přidání stavového panelu který zmizí po 5s od posledního stisku klávesy. V případě přidávání mezi oblíbené bych doporučil oddělit otevřené stránky od stránek oblíbených.
14