EVALUATING YOUR SISTEM
Whether this system is good ??
This one looks good, but How can I’ll be sure ?
Program Evaluation Use social science research methods to determine whether programs are sufficient, appropriate, effective and efficient Generates information about how to improve programs that do not meet criteria Ensures program is conducted as it was designed Monitor whether program produces desired results and progress toward desired goals
No slide master EVALUASI ! TES ATAS TINGKAT PENGGUNAAN & FUNGSIONALITAS SISTEM YANG DILAKUKAN DI LABORATORIUM, DI LAPANGAN ATAU DALAM KOLABORASI DENGAN PENGGUNA
Frequent error is to add an evaluation after the fact Evaluation should begin while the program is being created, ending only after the final assessment has measured the extent to which the program met its intended goals During the course of the program, the program should produce most of the information needed to evaluate its effectiveness in achieving goals and objectives Budgeting for the evaluation is important part of planning Evaluation Planning
EVALUASI WHAT IS THE GOAL… FUNGSI SISTEM PROBLEM SISTEM INTERFACE FOR USER PROBLEM SISTEM WHAT IS THE GOAL…
TYPE of EVALUATION As per place
LABORATORIUM FASILITAS LENGKAP BEBAS GANGGUAN NO REAL SITUATION OPERATOR TERBEBAS DARI GANGGUAN YANG MENGHAMBAT LAB BAGUS DILENGKAPI FASILITAS PEREKAMAN AUDIO/VISUAL YG BAIK , KOMPUTER BESERTA PERLENGKAPANNYA YG MUNGKIN TIDAK ADA PADA LOKASI KERJA YG SEBENARNYA SITUASI PADA LAB TIDAK MENGGAMBARKAN SITUASI RUANG KERJA YANG SEBEANARNYA
LOKASI SEBENARNYA BANYAK GANGGUAN SITUASI LEBIH TERBUKA BETTER THEN LAB
TYPE of EVALUATION As per Quality
PROVIDE A QUANTIFIABLE MEASURE EXPRESSED IN PROPORTIONS QUANTITATIVE
QUALITATIVE COMMUNICATE GENERAL EXPECTATIONS EXPRESSED IN GRADING OPEN TO INTERPRETATION QUALITATIVE
TYPE of EVALUATION As per Time
FORMATIVE ON GOING EVALUATION DURING AN INSTRUCTIONAL PERIOD TO KNOW THE PERCEPTIONS OF THE USER IN COMPARISON TO INSTRUCTOR FORMATIVE
REGULARLY SCHEDULED AT THE END OF ACADEMIC TERMS SUMMATIVE
EVALUASI DESIGN Evaluasi ini dilakukan setelah proses perancangan Evaluasi pertama terhadap sistem idealnya dilakukan sebelum implementasi dimulai. Jika perancangan di evaluasi , “idealnya” kesalahan dapat dihindari.
PARADIGMA EVALUASI “Quick and Dirty” evaluation Usability testing Field studies Predictive evaluation
QUICK & DIRTY EVALUATION Adalah umpan balik berupa keinginan dan yang disukai dari user atau konsultan yang disampaikan secara informal kep gp y g y ada desainer tentang produk yang dibuatnya ` Evaluasi ini dapat dilakukan pada semua tahapan pembuatan produk dan penekanannya pada masukan yang cepat/sesingkat mungkin daripada temuan yang didokumentasikan secara hati-hati QUICK & DIRTY EVALUATION The Power of PowerPoint | thepopp.com
Melibatkan pengukuran kinerja user dalam mempersiapkan tugasnya secara hati-hati, dari proses inilah maka dibuatkan desain sistemnya Ki j di k d l j l h k l h Kinerja user umumnya diukur dalam jumlah kesalahan yang dilakukan dan waktu yang dibutuhkan untuk menyelesaikan tugas Cara yang umumnya digunakan untuk membuat sistem ini yaitu dengan cara: ` Melihat secara langsung ` Merekamnya dalam video Evaluasi ini menggunakan kuesioner dan wawancara kepada user tentang kepuasannya menggunakan sistem tersebut Penelitian biasanya dilakukan di dalam sebuah laboratorium, dimana user diberi suatu treatment tertentu (mis: cahaya, suara, warna, dll) atau bisa juga tanpa treatment USABILITY TESTING The Power of PowerPoint | thepopp.com
dilakukan di lingkungan asli dimana user bekerja, hal ini bertujuan untuk meningkatkan pemahaman tentang kerja user secara alami dan bagaimana teknologi tersebut berdampak padanya Evaluasi ini dapat digunakan untuk: ` Membantu mengidentifikasi kesempatan sebuah teknologi baru ` Menentukan kebutuhan-kebutuhan untuk melakukan desain ` Memfasilitasi pengenalan sebuah teknologi ` Evaluasi teknologi Teknik yang dapat digunakan: ` Interview ` Observasi (pengamatan yang hanya dilakukan oleh desainer) ` Partisipatori (user dilibatkan dalam pembuatan desain) ` Ethnography (penilaian berdasarkan budaya FIELD STUDIES The Power of PowerPoint | thepopp.com
PREDICTIVE EVALUATION BERDASARKAN PENGALAMAN PAKAR DALAM MENGHADAPI USER, BIASANYA DIJADIKAN PATOKAN UNTUK MEMPREDIKSI MASALAH PENGGUNAAN PRODUK TIDAK PERLU MANGHADIRKAN USER PROSES PEMBUATAN RELATIF CEPAT, MURAH & DISUKAI PERUSAHAAN PREDICTIVE EVALUATION The Power of PowerPoint | thepopp.com
TEKNIK-TEKNIK EVALUASI OBSERVING USERS ASKING USER THEIR OPINIONS ASKING EXPERTS THEIR OPINIONS TESTING USER’S PERFORMANCE MODELING USERS’ TASK PERFORMANCE TO PREDICT THE EFFICACY OF A USER INTERFACE. TEKNIK-TEKNIK EVALUASI
MENILAI WEBSITE www.stimata.ac.id PHOTOGRAPHY 2 MENILAI WEBSITE www.stimata.ac.id SECARA KESELURUHAN PENDAPAT PARA EVALUATOR ADALAH NETRAL KARENA NILAINYA 3.76 KRITERIA YANG PALING BAGUS ADALAH INFORMASI YANG SELALU UP TO DATE YANG HARUS DITINGKATKAN ADALAH KRITERIA PERPADUAN WARNA