Evaluasi
Evaluasi Mengapa? Apa yang dievaluasi? Memastikan kecocokan dengan permintaan pengguna/tujuan pengguna Apa yang dievaluasi? Web browser: berapa cepat pengguna temukan item pada produk Ponsel seri terbaru: warna yang paling disukai, rangkain fitur yang disukai Online Catalog: kecepatan menampilkan hasil, variasi fitur pencarian
Di mana evaluasinya? Kapan evaluasi? Di laboratorium Di tempat alami pengguna produk Kapan evaluasi? Produk baru Perbaikan produk
EVALUASI Evaluasi yang dilakukan untuk menguji kesuksesan suatu produk yang sudah selesai yaitu mencapai standar yang ditentukan sebelumnya (ISO, NIST, BSI) → Summative evaluation Evaluasi yang dilakukan selama desain untuk memastikan produk sesuai dengan yang diinginkan pengguna → Formative evaluation
Apa yang dievaluasi dari aplikasi berikut? Wordprocessor Website penjualan komputer Aplikasi jaringan sosial (social network)
Pendekatan Evaluasi Usability testing Field study Analytical evaluation
Metode Observasi pengguna Interview pengguna Kuesioner Interview ahli Pengujian oleh pengguna Pemodelan kinerja pengguna
Usability Testing Memastikan konsistensi struktur navigasi, penggunaan istilah, dan bagaimana sistem merespon pengguna Mengukur kinerja pengguna untuk selesaikan tugas tertentu Metode: Mengamati pengguna menggunakan sistem dan merekam kesalahan, waktu Interview/kuesioner untuk mendapatkan pendapat pengguna
Dilakukan di laboratorium Contoh aplikasi : wordprocessor, spreadsheet, database.
Field Studies Memahami apa yang orang lakukan dan bagaimana produk terlibat/berperan dalam kegiatan mereka Identifikasi kesempatan adanya teknologi baru Membangun kebutuhan desain Fasilitasi pengenalan teknologi baru atau meluncurkan teknologi dalam konteks yang beda Evaluasi teknologi
Metode Interview observasi
Analytical Evaluation Evaluasi tanpa melibatkan end-user Metode: Inspeksi → heuristic evaluation Menggunakan standar untuk identifikasi masalah usability Walkthrough Melibatkan ahli untuk menjalankan skenario pada prototype aplikasi Gunakan simulasi penyelesaian masalah oleh pengguna Fokus pada evaluasi desain kemudahan sistem untuk dipelajari
Analytical Evaluation Paradigma evaluasi Usability Testing Field Studies Analytical Evaluation Peran pengguna Jalankan serangkaian tugas Berlaku alami Tidak terlibat pengontrol Evaluator mengontrol Evaluator dan pengguna Evaluator ahli lokasi laboratorium Situasi alami Laboratorium dengan situasi pengguna digunakan Dengan prototype atau produk Desain awal untuk cek kebutuhan Prototype atau model Tipe data Kuantitatif, statistik, hasil kuesioner Kuantitatif, sketsa, skenario, dll Studi kasus dari ahli Umpan balik untuk desain Laporan pengujian deskripsi/penjabaran Daftar masalah dari ahli filosofi Pendekatan aplikatif dengan eksperimen Observasi yang objektif
Kombinasi Pendekatan Field study untuk evaluasi ide desain awal dan dapatkan umpan balik Membuat perubahan pada desain Usability test untuk cek fitur desain khusus Field study untuk melihat apa yang terjadi pada lingkungan alaminya Membuat perubahan akhir
AKTIFITAS KELOMPOK Tiap kelompok memilih satu aplikasi Temukan hal-hal yang perlu dievaluasi dari aplikasi berikut : Antivirus Zip tools Instant Messenger Search Engine Email application