Pengukuran LO dan SO Mervin Hutabarat
Program Pendidikan/ Pembelajaran Evaluasi dan Asesmen Evaluasi Asesmen Pembelajar Hasil/ Capaian Program Pendidikan/ Pembelajaran
Objectives dan Outcomes Tujuan – mau ke mana? PEO – Program Educational Objective Course Objectives Learning Objectives Hasil - apa yang tampak? SO – Student Outcomes (dh. Program Outcomes) Course Outcomes Learning Outcomes
Pendahuluan Sistem loop tertutup – dengan umpan balik “Plant” “Gangguan” Galat “Plant” Rujukan yang Diinginkan Hasil yang Diperoleh Umpan Balik
Pendahuluan Two-Loop EC2000
Program Educational Objectives (PEO) Tujuan Program Pendidikan: Kemana lulusan ditujukan setelah lulus Harus diinformasikan kepada publik
Student Outcomes (SO) Capaian (terukur) pada Mahasiswa Kemampuan yang diperoleh saat menyelesaikan program pendidikan SO bersama PEO harus diinformasikan pada publik.
Body of Knowledge Uraian utuh pengetahuan dan kemampuan yang harus dimiliki lulusan untuk memasuki profesinya Merujuk pengetahuan spesifik yang diperlukan Bukan taksonomi ilmu pengetahuan Contoh: S1 Kimia dan S1 Pendidikan Kimia Diurai menjadi Knowledge Areas dan Topics
Learning Objectives dan Outcomes Topik Pembelajaran dilengkapi Learning Objectives dan Outcomes Learning Objectives mencakup Uraian materi yang hendak diajarkan Urutan proses mencapainya Learning Outcomes mencakup Target capaian pembelajar (merujuk pada taksonomi Bloom) Lama waktu yang diperlukan
Taksonomi Bloom
Revisi Taksonomi Ranah Kognitif Bentuk Asli Revisi
Mata Kuliah (Course) Topik-topik digabung dalam Mata Kuliah Course Memperhitungkan waktu belajarnya Menetapkan urutan belajarnya Deskripsi Topik, Learning Objectives dan Outcomes Menghindari duplikasi materi pengajaran Menghidari adanya materi yang tak tercakup Menghindari pembelajaran tanpa pengetahuan pendukung
BoK dan Mata Kuliah Course A Course B BOK Prodi Knowledge Area Topik Topic Subtopic subtoptic Course A Course B
MK MK1 MK 2 MK 3 MK 4 MK 5 MK 6 MK n SO SO1 SO2 SO3 SO4 SO5 SO6 SO7 LO LO LO LO LO LO LO LO LO LO LO PEO PEO1 LO LO LO LO LO LO LO LO LO LO LO LO LO LO
Asesmen Student Outcomes Dilakukan melalui pengukuran dan evaluasi hasil pengukuran Pada mata kuliah dengan sampling populasi Disebar dengan berjenjang pada seluruh kuliah wajib Dikaitkan dengan pengukuran Learning Outcomes untuk kemudahan Dengan cara Direct Measurements – pada aktivitas dan hasil kerja pembelajar Indirect – persepsi dari kuesioner pembelajar atau pihak lain
Direct and Indirect Measurements Survey mahasiswa akan capaiannya dalam perkuliahan (CO) Survey wisudawan akan capaian dalam program studinya (SO) Survey tenaga perekrut capaian program studi (SO) dan isu lain Survey alumni untuk persepsinya posisi terhadap PEO Survey employer untuk persepsinya posisi terhadap PEO
Direct and Indirect Measurements Alat ukur adalah rubrics yang dikenakan pada karya (tugas, PR, Kuis, Makalah, Ujian dll.) dan aktivitas (praktikum, seminar, dll.) mahasiswa Seyogianya dilakukan pada setiap mata kuliah untuk setiap capaian diharapkan mata kuliah Sejalan dengan proses penilaian mahasiswa, namun mempunyai tujuan yang berbeda – rancangan yang baik akan memudahkan pelaksanaan keduanya secara simultan
Rubrics Rujukan pengukuran performansi (alat/ pedoman penilaian) pada populasi dengan uraian kriteria yang tegas Rubrics berisi: Materi yang harus dikuasai Outcomes yang diharapkan sesuai kurikulum Pembagian tingkat penguasaan (umumnya 3-5 tingkatan), contoh: Apprentice, Basic, Learned, Exemplary Kriteria capaian dan kekurangan yang terjadi pada tiap tingkat
Penyusunan Rubrik Rujuk pada Learning Outcomes (LO) yang akan diukur Tentukan Performance Criteria (PC) dari LO tersebut yang akan diukur Tentukan jumlah kategori (metrik) capaian yang akan dibuat Tentukan kategori yang dapat diterima sebagai memenuhi target dan berikan uraian hasil/ capaian yang diharapkan Tentukan uraian capaian yang menunjukkan hasil yang lebih baik dari target Tentukan uraian capaian yang kurang atau gagal memenuhi target
Rubrik Asesmen
Mengapa Rubrik? Menyelaraskan aktivitas dengan tujuan Mendefinisikan sasaran yang jelas Menawarkan kriteria untuk penilaian isu subyektif Membantu pemberian nilai yang adil Menilai dengan lebih cepat Memberikan umpan balik pada mahasiswa Memberi kesempatan mahasiswa menilai dirinya sendiri Memberi kesempatan mahasiswa memperbaiki diri
Jenis Rubrik Holistik Menilai keseluruhan komponen pekerjaan mahasiswa Nilai tunggal (ya/tidak), lebih subyektif namun mudah menilai Umumnya untuk menilai program dengan multidimensi Tidak berdasarkan artifak nilai Penilaian umum pada kelompok
Jenis Rubrik Analitik Menilai komponen spesifik pekerjaan mahasiswa yang relevan Menggunakan tingkatan nilai (umumnya 4 tingkat) Memberi penilaian pada hal yang subyektif Umumnya untuk mata kuliah Menyediakan umpan balik pada mahasiswa
Tujuan Penggunaan Rubrik Tingkat kuliah Berbasis pada tugas Pengembangan individu atau kelompok Mendukung capaian pembelajaran kuliah – asesmen berganda Tingkat program Tertanam pada kuliah Pada artifak yang dipilih acak Mendukung capaian pembelajaran program
Pertanyaan Kunci Tujuan asesmen Assessment of learning Assessment for learning Pembelajaran apa yang akan diukur asesmen Proses hasil
Langkah Design Identifikasi learning outcomes Identifikasi tingkat pengetahuan Identifikasi kriteria Pengelompokan kriteri yang sama Identifikasi skala nilai Definisi komponen dan skala Berbagi dan merevisi
Identifikasi Outcomes Tujuan terkait oucomes Outcomes yang didukung asesmen Tingkat dukungan pada outcomes
Identifikasi Tingkat Pengetahuan Tipe pengetahuan Faktual: pengetahuan dasar disiplin ilmu Konseptual: organisasi, klasifikasi Prosedural: langkah proses Atitudinal: emosi, kepercayaan Psikomotor: aktivitas fisik Metakognitif: regulasi diri, persistensi
Identifikasi Kriteria Pengelompokan ke dalam 4-8 kategori kriteria Komponen utama dalam tugas yang diberikan Makalah Isi Pendahuluan-Kesimpulan Panjang Sitasi Referensi Presentasi Isi Kreativitas Penggunaan PPT Kemampuan bicara Laporan Praktikum Hipotesis Rancangan percobaan Hasil Kesimpulan
Identifikasi skala nilai Mengembangkan skala penilaian 3-4 tingkat Identifikasi kualitas keberhasilan minimum Upayakan selalu positif Excellent, Average, Starter Fully developed, Developing, Getting started Accomplished, competent, developing, beginning Advance, Proficient, Novice, Beginner
Identifikasi skala nilai Menetapkan bobot Bila angka diperlukan Menolong identifikasi apa yang penting pada tugas Kategori Bobot Asesmen topik 30 Isi dan diskusi Organisasi dan struktur 20 Bahasa dan ejaan 10 Format
Berbagi dan Merevisi Bagikan dan diskusikan dengan mahasiswa Hasil akan meningkat kualitasnya Mahasiswa menyediakan waktu dengan baik Bagikan dengan sesama dosen
Fitur Rubrik yang Baik Menolong mahasiswa memahami Menolong dosen Apa yang diinginkan dalam tugasnya Seperti apa kinerja yang baik Apa yang dilakukannya dengan baik Apa yang harus dilakukan kemudian Menolong dosen Merencanakan instruksi Menilai dengan konsisten Argumentasi yang baik untuk penilaian Komunikasi yang baik dengan mahasiswa
Format Rubrik Kriteria Istimewa Mahir Berkembang Pemula Komentar Kategori 1 Kategori 2 Kategori 3 Kategori 4 Kategori 5
Contoh Rubrik Kriteria Istimewa Mahir Berkembang Pemula Menentukan Simpul Memberikan alasan pemilihan simpul rujukan Memilih simpul rujukan yang baik Mengenali seluruh simpul Mengenali sebagian simpul Menggunakan KCL Menuliskan KCL dengan sistematis dan konsisten Menuliskan KCL dengan sistematis Menuliskan KCL benar Menuliskan KCL namun ada rujukan salah Menyusun Persamaan Linier Menuliskan dalam bentuk matriks Menuliskan dalam bentuk baris sistematis Memisahkan variabel dan konstanta lengkap Memisahkan variabel dan konstanta tidak lengkap
Contoh Rubrik Kriteria Istimewa Mahir Berkembang Pemula Menyelesaikan persamaan linier Dilengkapi dengan penjelasan tiap langkah Dengan eliminasi testrukur dan benar Dengan eliminasi tanpa strukur dan benar Dengan eliminasi tanpa strukur dan ada kesalahan Mengintegrasikan langkah Semua langkah digunakan dengan benar dilengkapi dengan penjelasan Semua langkah digunakan dengan benar Menggunakan semua langkah namun ada kesalahan Menggunkan hanya sebagian langkah
Terima Kasih