KONSTRUKSI BUTIR SOAL DAN ANALISIS SOAL CBT Wening Prastowo.

Presentasi berjudul: "KONSTRUKSI BUTIR SOAL DAN ANALISIS SOAL CBT Wening Prastowo."— Transcript presentasi:

1 KONSTRUKSI BUTIR SOAL DAN ANALISIS SOAL CBT Wening Prastowo

2 PENGGUNAAN MCQ DALAM UKMPPD DIDASARKAN PERTIMBANGAN
RELIABILITAS YANG TINGGI DAPAT MENGUJI DOMAIN YANG LUAS UJIAN CBT PERSIAPAN, PELAKSANAAN, ITEM ANALYSIS/ REVIEW DAPAT MENILAI BERBAGAI CAPAIAN PEMBELAJARAN

3 PENGGUNAAN VIGNETTE / SKENARIO KLINIK, MAMPU MENDISKRIMINASI KEMAMPUAN ATAU LEVEL KOGNITIF
SATU VIGNETTE DAPAT DIBUAT LEBIH DARI SATU LEAD-IN

4 BAGIAN SOAL MCQ BADAN SOAL / STEM SOAL / VIGNETTE ( MISALNYA BERUPA SKENARIO KLINIK) PERTANYAAN (LEAD – IN) PILIHAN ( TERDIRI DARI 1 JAWABAN YANG BENAR DAN 4 DISTRACTORS)

5 PENULISAN BADAN SOAL (VIGNETTE)
HARUSLAH BERUPA SKENARIO KLINIK ( BISA JUGA POTONGAN FILM, TAMPILAN GAMBAR DARI MIKROSKOP, HASIL X-RAY, FOTO,TABEL) MEMUAT INFORMASI YANG OPTIMUM UNTUK MENJAWAB SOAL BERISI INFORMASI KEADAAN NYATA

6 PENULISAN VIGNETTE HARUS BERFUNGSI DALAM MENJAWAB SOAL
SKENARIO KLINIK : - JENIS KELAMIN DAN UMUR - TEMPAT PERAWATAN - KELUHAN UTAMA - DURASI KELUHAN - RIWAYAT PASIEN YANG BERKAITAN DENGAN KELUHAN

7 - TEMUAN PEMERIKSAAN FISIK
- HASIL PEMERIKSAAN INVESTIGASI DIAGNOSTIK - HASIL - HASIL TERAPI SEBELUMNYA - TEMUAN LAINNYA

8 Seorang (laki-laki/perempuan/anak laki-laki/anak perempuan) berusia …
Seorang (laki-laki/perempuan/anak laki-laki/anak perempuan) berusia …..tahun (datang/dibawa orang tuanya/dibawa keluarganya) ke (rumah sakit/Puskesmas/dokter praktik umum) dengan keluhan…….. Keluhan disertai……. Pasien diketahui…… Bekerja sebagai…… Pada pemeriksaan fisik (diperoleh/ditemukan/didapatkan) keadaan umum…… Pada pemeriksaan tanda vital diperoleh tekanan darah …mmHg, denyut nadi ….x/menit, frekuensi nafas …x/menit dan suhu …. 0C. Pada pemeriksaan (obstetrik, dermatologik, visus, neurologik) (diperoleh/ditemukan/didapatkan) ……… Pada pemeriksaan laboratorium (darah/urine/feses/cairan serebro spinal) diperoleh ……. Pada pemeriksaan foto rontgen diperoleh gambaran………

9 PENULISAN PERTANYAAN (LEAD – IN)
MENGGUNAKAN KATA TANYA LANGSUNG MENANYAKAN KONSEP YANG PENTING DAN SPESIFIK, BUKAN MENILAI KEMAMPUAN MENGINGAT FAKTA YANG BERSIFAT TRIVIAL. HINDARI KALIMAT ATAU FRASE NEGATIF (KECUALI, TIDAK, BUKAN) HINDARI KALIMAT PERTANYAAN YANG TERLALU PANJANG

10 PENULISAN PILIHAN JAWABAN (OPTIONS)
DISTRAKTOR ATAU PENGECOH: - PILIHAN YANG SALAH ATAU LEBIH INFERIOR DARI JAWABAN - CUKUP MASUK AKAL DAN MENARIK BAGI PESERTA YANG KURANG/TIDAK BELAJAR - SETARA DENGAN JAWABAN DALAM HAL STRUKTUR MAUPUN PANJANGNYA

11 PILIHAN HARUSLAH HOMOGEN
SECARA GRAMATICAL KONSISTEN HINDARI KATA ABSOLUT (SELALU, TIDAK PERNAH, SEMUA) HINDARI ISTILAH FREKUENSI YANG TIDAK JELAS (SERING, BIASANYA) HINDARI MENGGUNAKAN KATA / FRASA YANG SAMA DENGAN VIGNETTE HINDARI BSSD / SEMUA BENAR

12 KESALAHAN TEKNIS/STRUKTUR SOAL
TESTWISENESS : KEADAAN DIMANA PESERTA UJIAN DAPAT MENJAWAB, BUKAN KARENA PENGUASAANNYA TERHADAP MATERI, TETAPI KARENA KEPINTARANNYA DALAM MENEBAK YANG BENAR

13 IRRELEVANT DIFFICULTY :
KESULITAN YANG DIHADAPI PESERTA UJIAN , BUKAN KARENA SULITNYA MATERI, NAMUN LEBIH KE ARAH SULITNYA MENJAWAB, YANG DITIMBULKAN OLEH STRUKTUR SOAL

14 KESALAHAN YANG BERKAITAN DENGAN TESTWISENESS
GRAMATICAL CUES LOGICAL CUES ISTILAH YANG ABSOLUT JAWABAN BENAR YANG PANJANG PENGULANGAN KATA DARI BADAN SOAL KE JAWABAN KONVERGENSI SOAL

15 KESALAHAN YANG BERKAITAN DENGAN KESULITAN YANG TIDAK PERLU
PILIHAN JAWABAN YANG PANJANG, KOMPLEKS ATAU DUPLIKASI PILIHAN YANG BERUPA ANGKA TIDAK DIURUT SESUAI BESARNYA PILIHAN YANG MENGANDUNG UNSUR FREKUENSI SUATU KEJADIAN BERSIFAT MULTI INTERPRETASI PILIHAN JAWABAN YANG TIDAK PARALEL DAN URUTAN TIDAK LOGIS

16 PENGGUNAAN BSSD (BUKAN SALAH SATU DI ATAS)
BADAN SOAL TERLALU PANJANG, SULIT, DAN KOMPLEKS.

17 CONTOH SOAL YANG BAIK

18 GRAMATICAL CUES : satu atau lebih pilihan tidak sesuai dengan pertanyaan

19 LOGICAL CUES : sebagian pilihan telah memperlihatkan kemungkinan jawaban benar

20 ISTILAH YANG ABSOLUT

21 JAWABAN BENAR YANG PANJANG

22 PENGULANGAN KATA : jawaban mengandung kata yang diulang dari badan soal

23 KONVERGENSI SOAL : jawaban yang benar mengandung komponen yang paling sering muncul

24 PILIHAN JAWABAN PANJANG, KOMPLEKS, ATAU BERULANG

25 PILIHAN BERUPA ANGKA TIDAK DIURUT SESUAI BESARNYA

26 PILIHAN YANG MENGANDUNG UNSUR FREKUENSI BERSIFAT MULTI-INTERPRETASI

27 PILIHAN JAWABAN TIDAK PARALEL DAN URUTAN TIDAK LOGIS

28 PENGGUNAAN BSSD

29 BADAN SOAL TERLALU PANJANG, SULIT DAN KOMPLEKS

30 PENGEMBANGAN MODEL SOAL MCQ

31 GAMBARAN HASIL FOTO X-ray

32 TABEL

33 GRAFIK

34 CUPLIKAN LAPORAN

35 DAFTAR LITERATUR

36

37

38

39

40

41 ANALISIS / REVIEW SOAL

42 ISI SOAL RELEVANSINYA DENGAN KOMPETENSI DOKTER UMUM SESUAI KIPDI
sangat relevan (4) relevan (3) ragu ragu (2) kurang relevan (1) tidak relevan (tidak ada di SKDI)

43 DENGAN SKDI SESUAI lanjutkan dengan perbaikan redaksional soal yang mencakup Stem soal, Question tag, Option TIDAK SESUAI lakukan perbaikan konten, dengan tanpa menyita waktu (<5 menit ). Jika tidak bisa, review soal berikutnya

44 Bahasa yang digunakan Sulit dimengerti Kurang dimengerti
Mudah dimengerti

45 Tingkat Kesulitan Soal
Sangat sulit Sulit Sedang Mudah Sangat mudah

46 STEM SOAL Vignette disusun secara runtut dan sesuai dengan konteks pelayanan primer Kesalahan tata bahasa Informasi untuk menjawab soal lengkap Informasi berlebihan, soal terlalu panjang

47 Lead In Memenuhi close the option rules Kesalahan tata bahasa

48 Option Gramatical cues Logical cues Penggunaan istilah yang absolut
Jawaban benar yang panjang Pengulangan kata dari badan soal ke jawaban Konvergensi soal

49 Option Pilihan jawaban yang panjang, kompleks dan duplikasi
Pilihan yang berupa angka tidak diurut sesuai dengan besarnya Pilihan yang mengandung unsur frekuensi suatu kejadian bersifat multi interpretasi Pilihan jawaban tidak paralel dan urutan tidak logis

50 Option Penggunaan BSSD Badan soal terlalu panjang, sulit dan kompleks

51 Komentar Umum Reviewer
ID Soal : Kesimpulan Hasil Review ( ) Diterima tanpa perbaikan ( ) Diterima dengan perbaikan ( ) Perlu konfirmasi pembuat soal ( ) Tidak perlu konfirmasi dengan pembuat soal ( ) Dikembalikan kepada pembuat soal ( ) memerlukan perbaikan keseluruhan ( ) Berpotensi diterima dengan perbaikan

52 (DD) / (MM) / (YY) Saran Perbaikan Tanggal: Tanda Tangan Reviewer
Nama Jelas :

53 Blue Print UKDI Tinjauan 1: KIPDI 3 Tinjauan 2 Tinjauan 3 Tinjauan 4
Keterampilan dasar klinis Kognitif Recall Reproduksi Pertumbuhan, perkembangan, dan degenerasi Promosi kesehatan dan pencegahan penyakit Individu Aplikasi biomedis, perilaku, klinis, & epidemiologi pada kedokteran keluarga Prosedural Reasoning Kepala dan leher Kelainan genetik dan kongenital Penapisan (Diagnosis) Keluarga Komunikasi efektif Konatif Syaraf & Perilaku Penyakit infeksi dan imunologi Manajemen (Terapi) Masyarakat Manajemen masalah kesehatan primer Dermatomusculoskeletal Penyakit neoplasma Rehabilitasi Penelusuran, kritisi, dan manajemen informasi Hemato dan immunology Penyakit akibat trauma atau kecelakaan Profesionalisme, moral, dan etika praktik kedokteran Cardiovascular Kesadaran, pemeliharaan, dan pengembangan personal Gatrointestinal, hepatobilier, dan pankreas Respiratory Urogenital Endokrin dan Metabolisme Blue Print UKDI 53

54

55 PENYAMAAN ISTILAH Wanita Perempuan Pria Laki laki Hemoglobin Hb UGD
ISTILAH YANG ADA ISTILAH DI UKDI Wanita Perempuan Pria Laki laki Hemoglobin Hb UGD Unit gawat darurat RS g/dl Umur Usia Puskesmas puskesmas(kecuali jika ada nama, Puskesmas )

56 PENYAMAAN ISTILAH Diagnosa diagnosis Serologis Serologik Thorax Toraks
ISTILAH YANG ADA ISTILAH DI UKDI Diagnosa diagnosis Serologis Serologik Thorax Toraks Ronchi Ronkhi Bahasa asing / nama latin Italic BAB Buang air besar BAK Buang air kecil

57 PENYAMAAN ISTILAH Anamnesa anamnesis Nadi Denyut nadi Nafas /RR
ISTILAH YANG ADA ISTILAH DI UKDI Anamnesa anamnesis Nadi Denyut nadi Nafas /RR Frekuensi napas Suhu Temperatur Composmentis Compos mentis Antihipertensi Anti hipertensi radiologis Radiologik

58 PENYAMAAN ISTILAH Farmakologis farmakologik Ca / carcinoma Karsinoma
ISTILAH YANG ADA ISTILAH DI UKDI Farmakologis farmakologik Ca / carcinoma Karsinoma Kholesterol Kolesterol Tachycardi Takhikardia Penderita Pasien tachiepneu Takhipneu

59 SEMOGA BERMANFAAT