EVALUASI Chalifa Chazar Email:
[email protected] Modul : http://edu.script.id
Definisi
Implementasi
Desain
Evaluasi Desain
• Evaluasi adalah test terhadap tingkat penggunaan dan fungsionalitas • Evaluasi ini dilakukan untuk memastikan kesesuaian dan mencocokan antara permintaan user dan hasil rancangan sistem
Tujuan • Melihat seberapa jauh sistem berfungsi • Melihat efek interface bagi pengguna (user) • Mengidentifikasi problem khusus yang terjadi pada sistem
Jenis Evaluasi • Summative evaluation
– Evaluasi yang dilakukan untuk menguji kesuksesan suatu produk yang sudah selesai yaitu mencapai standar yang ditentukan sebelumnya (ISO)
• Formative evaluation
– Evaluasi yang dilakukan selama desain untuk memastikan produk sesuai dengan yang diinginkan pengguna (user)
Teknik Evaluasi • • • •
Cognitive Walkthrough Heuristic Evaluation Review Based Evaluation Model Base Evaluation
Cognitive Walkthrough • Teknik ini digunakan untuk melihat seberapa besar dukungan yang diberikan kepada user untuk mempelajari beberapa tugas yang diberikan • Beberapa isu yang muncul:
– Pengaruh apa yang timbul setelah tugas ini diberikan ke pengguna – Proses cognitive apa yang tersedia – Masalah pembelajaran apa yang harusnya muncul
• Langkah-langkah cognitive walkthrough: – – – –
Pilih tugas Deskripsikan tujuan awal dari user Lakukan kegiatan/aksi yang tepat Analisis proses keputusan untuk setiap kegiatan
• Analisis difokuskan pada tujuan user dan pengetahuan • Cognitive walkthrough berbasis form yang merujuk pada sekumpulan pertanyaan yang berhubungan dengan tugas dan tujuan user
Heuristic Evaluation • Evaluasi dilakukan melalui kinerja dari serangkaian tugas dengan perancangan dan disesuaikan dengan keriteria setiap tingkatan • Sekumpulan kriteria usability atau heuristic diidentifikasi: – – – – –
Perilaku sistem dapat dipastikan Perilaku sistem konsisten Feedback tersedia Kemampuan memori user tidak melebihi batas Dialog merupakan orientasi tugas
Review Base Evaluation • Evaluasi antara eksperimen psikologi dengan interaksi manusia dan komputer menghasilkan hasil-hasil eksperimen yang baik dan pengalaman yang nyata
Model Base Evaluation • Pendekatan evaluasi ini berguna untuk mengevaluasi perancangan dengan kombinasi spesifikasi perancangan dan evaluasi ke dalam kerangka kerja yang sama
Faktor-Faktor Pendukung Evaluasi • Subjek siapa yang merepresentasikan • Variabel sesuatu untuk dimodifikasi dan ukuran • Hipotesis apa yang ingin ditunjukkan • Desain eksperimental bagaimana cara melakukannya
Contoh Evaluasi
Teknik Observasi • Dibantu dengan perangkat lunak untuk memonitor • Membuat catatan kejadian penting yang diobservasi dari video proses testing • Membantu membuat umpan balik diagnostic mengenai masalah penggunaan sistem
Teknik Query • Wawancara/interview • Kuisioner
Memilih Metode Evaluasi • • • • • • •
Tingkat siklus Tingkat obyektivitas dan subyektivitas Jenis ukuran yang tersedia Informasi yang tersedia Kesiapan dari suatu respon Tingkat gangguan secara tidak langsung Sumber yang tersedia
Tingkat siklus • Desain Vs Impelemtasi • Evaluasi pada tingkat perancangan hanya membutuhkan seorang yang ahli pada bidangnya • Evaluasi pada tingkat implemtasi membawa user sebagi subjek dari eksperimen
Tingkat obyektivitas dan subyektivitas • Subyektif Vs Obyektif • Pada teknik subyektif mempercayakan pada evaluator (orang yang melaukan evaluasi), sehingga hasil menjadi bias, sehingga dibutuhkan lebih dari satu evaluator • Pada teknik Obyektif menghasilkan hasil yang berulang tidak bergantung pada evaluator. Eksperimen terkontrol merupakan contoh pengukuran secara obyektif
Jenis ukuran yang tersedia • Qualitative Vs Quantitative measures • Pengukuran menggunakan numerik lebih mudah digunakan teknik statistic, sedangkan non-numerik lebih sulit dilakukan akan tetapi dapat menghasilkan sesuatu yang penting secara lebih lengkap yang tidak dapat dilakukan secara numerik
Informasi yang tersedia • Tingkat informasi yang tersedia untuk evaluator pada setiap tingkat proses perancangan dimulai pada informasi yang rendah sampai dengan tingkatan yang tinggi
Kesiapan dari suatu respon • Faktor yang membedakan teknik evaluasi adalah kesiapan mengambil tindakan yang tersedia
Tingkat gangguan secara tidak langsung • Intrusiveness • Merupakan teknik yang menghasilkan pengukuran segera yang dihasilkan user selama interaksi dan mempunyai resiko mempengaruhi perilaku user
Sumber yang tersedia • Hal terakhir yang perlu diperhatikan dalam memilih tenik evaluasi yakni: – – – – –
Peralatan Waktu Biaya Subyek Dan evaluator yang ahli
THANK YOU Chalifa Chazar, S.T, M.T Email:
[email protected] http://edu.script.id Copyright @2015