Evaluation INTERAKSI MANUSIA & KOMPUTER Semester Ganjil 2015/2016
LUTFI FANANI
[email protected]
Interaksi Manusia & Komputer Lutfi Fanani
PROTO TYPE EVALUAT ION METHOD
Interaction Design
EVALU ATION
prototype
Interaksi Manusia & Komputer Lutfi Fanani
PROTO TYPE EVALUAT ION METHOD
EVALU ATION
Interaction Design
Interaksi Manusia & Komputer Lutfi Fanani
PROTO TYPE EVALUAT ION METHOD
Interaction Design
EVALU ATION
USABILITY - ISO 9241 The effectiveness, efficiency and satisfaction with which specified users achieve specified goals in particular environments.
Interaksi Manusia & Komputer Lutfi Fanani
PROTO TYPE EVALUAT ION METHOD
EVALU ATION
Evaluation Evaluasi digunakan untuk melihat apakah hasil rancangan dengan proses uji coba system telah dibuat sesuai dengan permintaan pengguna Proses ini tidak dikerjakan dalam satu fase proses perancangan tetapi melalui perancangan dengan prinsip life cycle.
Interaksi Manusia & Komputer Lutfi Fanani
PROTO TYPE EVALUAT ION METHOD
EVALU ATION
Evaluation Goal 1. Menilai jangkauan dan aksesibilitas dari fungsi sistem. Sistem harus mudah digunakan, sesuai dengan kebutuhan dan harapan user
2. Menilai pengalaman pengguna (users experience) Apakah sistem mudah dipelajari, apakah user senang dan puas saat berinteraksi dgn sistem
3. Menemukan masalah-masalah tertentu terkait sistem.
Interaksi Manusia & Komputer Lutfi Fanani
PROTO TYPE EVALUAT ION METHOD
EVALU ATION
Evaluation Dua macam evaluasi: 1. Expert analysis evaluasi oleh desainer dan ahli usability 2. User Participation evaluasi dengan mengujikan sistem (participatory design)
* dalam HCD expert bisa jadi adalah user
kepada
user
Interaksi Manusia & Komputer Lutfi Fanani
PROTO TYPE EVALUAT ION METHOD
EVALU ATION
Evaluation – Participatory Design Adalah suatu pemikiran yang melibatkan keseluruhan alur perancangan dan tidak hanya proses evaluasi saja. Perancangan ini dilakukan pada ruang kerja yang melibatkan pengguna yang tidak hanya digunakan sebagai subyek percobaan tetapi juga sebagai anggota yang aktif dalam team perancangan. Argumennya adalah user dianggap ahli dalam konteks dan perancangan hanya dapat efektif pada konteks tersebut jika para ahli ini memberikan kontribusi yang aktif ke perancangan.
Interaksi Manusia & Komputer Lutfi Fanani
PROTO TYPE EVALUAT ION METHOD
EVALU ATION
Mengevaluasi Perancangan Evaluasi terjadi setelah proses perancangan. Evaluasi pertama system idealnya dilakukan sebelum implementasi dimulai. Jika perancangan dievaluasi, kesalahan dapat dihindari karena perancangan diubah/ diperbaiki sebelumnya. Sejumlah rnetode dibuat untuk mengevaluasi perancangan sebelum implementasi.
Interaksi Manusia & Komputer Lutfi Fanani
PROTO TYPE EVALUAT ION METHOD
Usability Method
EVALU ATION
Usability Evaluation Methods
Interaksi Manusia & Komputer Lutfi Fanani
PROTO TYPE EVALUAT ION METHOD
Perencanaan Evaluasi
EVALU ATION
1. Apa yg akan dievaluasi?
6. Partisipan (expert/user)
2. Tujuan
7. Tahapan evaluasi
3. Waktu dan tempat
8. Pengukuran
4. Sesi pengujian
9. Peran masing2 org dalam tim
5. Alat
Interaksi Manusia & Komputer Lutfi Fanani
PROTO TYPE
EVALU ATION
Memilih Partisipan 1. Tentukan karakteristik partisipan
EVALUAT ION METHOD
Usia, gender, latar belakang pendidikan, pengalaman/pengetahuan tertentu (bisa disesuaikan dengan karakteristik user)
2. Tentukan jumlah partisipan
Interaksi Manusia & Komputer Lutfi Fanani
PROTO TYPE
Memilih Partisipan
EVALU ATION Test
EVALUAT ION METHOD
5 users in a usability study
This lets you find almost as many usability problems as you'd find using many more test participants.
Exceptions: Quantitative studies (melihat statistik, not insights): Test at least 20 users to get statistically significant numbers; tight confidence intervals require even more users.
Interaksi Manusia & Komputer Lutfi Fanani
PROTO TYPE EVALUAT ION METHOD
EVALU ATION
Interaksi Manusia & Komputer Lutfi Fanani
PROTO TYPE EVALUAT ION METHOD
EVALU ATION
USABILITY - ISO 9241 Effectiveness: accuracy dan completeness ditentukan oleh pengguna sehingga dapat mencapai tujuan tertentu dalam lingkungan tertentu. Efficiency: resources yang dikeluarkan sehubungan dengan accuracy dan completeness sebuah tujuan tertentu. Satisfaction: comfort dan acceptability dari sistem yang dipengaruhi oleh penggunanya.
Interaksi Manusia & Komputer Lutfi Fanani
PROTO TYPE EVALUAT ION METHOD
EVALU ATION
Menentukan Pengukuran
Penetuan metode pengukuran berdasarkan definisi usability
Interaksi Manusia & Komputer Lutfi Fanani
PROTO TYPE EVALUAT ION METHOD
Menentukan Pengukuran
EVALU ATION
Effectiveness • Accuracy
Error rate
• Completeness
Successful task completeness
Efficiency (resources expended) • Time
Time on task
Satisfaction (comfort and acceptability)
• System Usability Scale (SUS)
Interaksi Manusia & Komputer Lutfi Fanani
PROTO TYPE EVALUAT ION METHOD
EVALU ATION
Tugas Akhir Aspek Penilaian 1. Proses awal perancangan (20%) • Problem statement (1-25) • Metode riset user + referensi (1-25) • Temuan riset, persona, dan skenario (1-25) • Diagram alir (1-25) 2. Prototyping & evaluation (40%) • Prototype lo-fi (1-30) • Prototype hi-fi (1-30) • Usability evaluation (1-40) 3. System usability (40%) • Useful (1-34) • Usable (1-33) • Used (1-33)
.ppt
Interaksi Manusia & Komputer Lutfi Fanani
PROTO TYPE EVALUAT ION METHOD
EVALU ATION
Tugas Akhir Sistem presentasi tugas akhir: o Waktu presentasi maksimal 15 menit per kelompok o Waktu tanya jawab 5-10 menit. o Setiap kelompok lain wajib memberikan penilaian saat presentasi. o Mengirimkan softcopy .ppt paling lambat H-1 sebelum presentasi ke email:
[email protected]
Interaksi Manusia & Komputer Lutfi Fanani
Tugas Akhir
Interaksi Manusia & Komputer Lutfi Fanani
PROTO TYPE EVALUAT ION METHOD
EVALU ATION
Usability Evaluation Error rate: Berapa banyak error yang terjadi saat dilakukian pengujian prototype kepada user. Successful task completeness: Berapa besar pekerjaan yang bisa dilakukan oleh seorang user. Time on task: Berapa lama waktu yang dibutuhkan user untuk mengerjakan suatu pekerjaan. System usability scale: Berapa besar skala kepuasan dari user terkait dengan usability sistem.