Item Development and Review Workshop
WORKSHOP NASIONAL ITEM DEVELOPMENT & REVIEW KEBIDANAN HPEQ KOMPONEN 2 JW MARIOT MEDAN
Tahap Penjaminan Mutu UKDI Input
Process
Output
1. Review Process 1. Blueprinting 2. Item Writing Standard 3. Item Reviewer Standard 4. ICT support
2. Try-out 3. Examination guideline 4. Report on Examination 5. Feedback process. 6. Item Bank
•
Criterionreference.
•
Standard setting exercise
ISI
Aspek Review STRUKTUR
Contoh Kasus 1: isi? Seorang pria 20 tahun, sehat, sebelumnya masuk perawatan rumah sakit dengan keluhan nyeri mendadak pada dada sebelah kiri, ECG normal, foto paru-paru terlihat pneumotoraks. Prosedur apa yang akan anda lakukan : A. Observasi. B. Barium meal. C. Torakotomi. D. Torakostomi. E. Torakostomi + intubasi.
SKDI Pneumothoraks (3a dan 3b) 3b. Mampu membuat diagnosis klinik berdasarkan
pemeriksaan fisik dan pemeriksaanpemeriksaan tambahan yang diminta oleh dokter (misalnya : pemeriksaan laboratorium sederhana atau X-ray). Dokter dapat memutuskan dan memberi terapi pendahuluan, serta merujuk ke spesialis yang relevan (kasus gawat darurat). Torakotomi, torakostomi tidak ada dalam list keterampilan dokter umum.
Lesson Learnt pada isi Apakah secara isi, topik soal yang ditanyakan esensial? Rujukan: Standard Kompetensi Dokter Indonesia (SKDI) dan blueprinting UKDI.
Scanning isi soal terkait topik soal
Dikembalikan
Review struktur
Vignette
Aspek Review
Lead in
Option
Scanning isi soal terkait topik soal
Dikembalikan
Review struktur Vignette
PENYAMAAN ISTILAH
7/22/2010
10
Contoh Kasus 2: vignette? Seorang laki-laki berusia 55 tahun datang dengan nyeri dada kiri yang hebat sejak 2 jam yang lalu saat sedang senam pagi. Nyeri dirasakan menjalar ke lengan kiri, tidak hilang dengan istirahat. Pasien adalah perokok berat. Kakak tertua meninggal mendadak 2 tahun yang lalu saat latihan tenis. Apakah pemeriksaan yang paling tepat saudara minta untuk memastikan diagnosis pasien di atas? A. Foto thorax dan EKG B. Echocardiografi dan EKG C. Echocardiografi dan enzim CPK D. EKG dan enzim CPK E. Foto thorax dan Echocardiografi
Komponen Vignette Jenis kelamin, Umur (e.g. laki-laki 45 tahun) • Kasus spesifik untuk wanita kehamilan • Kasus anak-anak, dewasa, geriatri? Tempat pelayanan/setting (IGD) Keluhan Utama Durasi Gejala penyerta dan keterangan pasien lainnya Pemeriksaan fisik Pemeriksaan penunjang
Lesson learnt pada vignette
Bahasa yang digunakan pada vignette Vignette terlalu pendek (tidak lengkap), atau terlalu panjang (tidak terkait logika option). Urutan vignette tidak sistematik (HT, PD, HT, PD, PP).
Soal baru Scanning isi soal terkait topik soal Esensial
Tidak esensial
Dikembalikan
Review struktur Vignette Lead-in
Kasus 3: Lead in? Seorang perempuan berusia 30 tahun mengeluh ada benjolan sebesar 1,5 cm dibawah telinga kanan. Keluhan ini dialaminya sejak 4 tahun yang lalu. Pada pemeriksaan status lokalisata diperoleh lesinya padat dan keras, dapat digerakkan, N.VII, fungsi baik, tidak teraba pembesaran kelenjar getah bening. Diagnosisnya kasus ini adalah : A. Kistoadenoma limfomatosum (Warthin tumor). B. Karsinoma Muko-epidermoid tahap awal. C. Tumor campur jinak. D. Tumor campur ganas. E. Adenokarsinoma sel asinar.
Menggunakan kata tanya secara langsung, sehingga dapat memenuhi “close the option rule”
Soal baru
Esensial
Scanning isi soal terkait topik soal Tidak esensial
Dikembalikan
Review struktur Vignette Lead-in
Option
Kasus 4: Option? Seorang pria berusia 60 tahun dibawa ke bagian gawat darurat oleh seorang polisi, yang menemukannya dalam keadaan tergeletak tidak sadarkan diri di sisi jalan. Pada pemeriksaan fisik diagnostik diperoleh saluran pernafasan dalam keadaan tidak tersumbat. Bagaimanakah langkah pertama pada administrasi intravena? A. pemeriksaan cairan serebrospinal B. glukosa dengan vitamin B1 (thiamine) C. CT scan kepala D. fenitoin E. diazepam
Lesson learnt pada Option Homogen: gramatikal, semantik, panjang-pendek. Hindari absolutisme: selalu, tidak pernah. Hindari konvergensi. Hindari kesamaan istilah dengan vignette. Hindari urutan yang tidak sistematis menyulitkan. Hindari kalimat: bukan salah satu di atas
Scanning isi soal terkait topik soal Esensial
Bagan Alir Proses Review
Soal baru
Tidak esensial
Review struktur Vignette
Lead-in Option
Dikembalikan
Materi : • • • •
Relevansi: Kongruensi Bahasa Tingkat kesulitan (tingkat kompetensi) Klasifikasi : e.g. Dasar atau klinik?
Apa saja yang perlu ditelaah? Struktur : • Stem • Lead in • Option
Kesimpulan • Komentar umum dan saran • Diterima/revisi/dikembalikan
Struktur Soal : Item Flaws Grammatical Cues Logical Cues Istilah yang absolut Jawaban benar yang panjang
( ) Ya ( ) Ya ( ) Ya ( ) Ya
( ) Tidak ( ) Tidak ( ) Tidak ( ) Tidak
( ) Ya ( ) Ya
( ) Tidak ( ) Tidak
Pengulangan kata dari badan
soal ke jawaban Konvergensi soal Pilihan jawaban yang panjang, kompleks, atau duplikasi
( ) Ya
( ) Tidak
Pilihan yang berupa angka tidak diurut
sesuai dengan besarnya
( ) Ya ( ) Tidak
Pilihan yang mengandung unsur frekuensi
suatu kejadian bersifat multi interpretas
( ) Ya
( ) Tidak
Pilihan jawaban tidak paralel dan
urutan tidak logis Penggunaan BSSD (bukan salah satu di atas pada pilihan jawaban) Badan soal terlalu panjang, sulit, dan kompleks
( ) Ya ( ) Tidak ( ) Ya ( ) Tidak ( ) Ya ( ) Tidak
Komentar Umum Reviewer
ID Soal :
Kesimpulan Hasil Review ( ) Diterima tanpa perbaikan ( ) Diterima dengan perbaikan ( ) Perlu konfirmasi pembuat soal ( ) Tidak perlu konfirmasi dengan pembuat soal ( ) Dikembalikan kepada pembuat soal ( ) memerlukan perbaikan keseluruhan ( ) Berpotensi diterima dengan perbaikan
Saran Perbaikan
Tanggal:
(DD) / (MM) / (YY)
Tanda Tangan Reviewer
Nama Jelas :
Exercise Seorang mahasiswa pria, 25 tahun datang ke rumah sakit dengan keluhan panas badan sejak 2 minggu yang lalu yang mulai secara gradual dan berlangsung remiten. BAB mencret lebih kurang 2 kali sehari. Pada pemeriksaan fisik ditemukan keadaan umum yang sakit sedang, apatis, hepatomegali 2 jari dibawah arcus costae. Hb 14,2 gr/dL, leukosit 4200 /mm3, trombosit 172000/mm3. Pertanyaan: Apa tindakan diagnosis yang akan anda lakukan pada pasien ini? Pilihan jawaban: A. Pemeriksaan Hemaglutinasi test untuk dengue B. Pemeriksaan Widal I dan II, Kultur darah dan feses untuk salmonela C. Pemeriksaan Widal I dan II. D. Pemeriksaan apus tebal darah untuk malaria/ DDR E. Feses rutin dan kultur
Exercise Datang seorang pria 55 tahun membawa hasil pemeriksaan gula darah yang menyatakan bahwa pria tersebut ternyata menderita Diabetes mellitus. Penderita tersebut belum pernah memeriksakan gula darah sebelumnya. Penderita tidak ada keluhan mengenai penglihatan kedua matanya. Sebagai dokter umum dengan fasilitas terbatas (tidak didapatkan oftalmoskop), kapan anda merujuk penderita tersebut ke dokter mata : A. Pada saat penderita tersebut didiagnosa Diabetes mellitus B. Setelah 5 tahun penderita mengidap Diabetes mellitus C. Setelah ada keluhan mengenai kedua mata penderita D. Bila kadar gula darah penderita mencapai 500 mg/dl E. Bila didapatkan kekeruhan pada lensa mata penderita
Exercise Seorang laki-laki umur 65 tahun datang ke dokter dengan keluhan nyeri dada kiri sampai ke punggung dan bahu kiri. Pada pemeriksaan nafas dan jari tangan bau rokok : tinggi badan 160 cm, berat badan 60 kg dan tensi darah 200/110. hasil lab. Kadar glukosa normal, total kolesterol 300 mg% HDL 35 mg%, LDL 200 mg%, TG 150 mg%. Selain obat-obatan untuk penyakitnya, saran apakah yang sebaiknya diberikan kepada penderita di atas? A.Olahraga teratur dan diet lemak jenuh B.Berhenti merokok C.Banyak makan asam lemak tidak jenuh D.Berhenti merokok dan olahraga teratur E.Olahraga teratur, banyak makan asam lemak tidak jenuh, berhenti merokok.
Alasan penolakan Isi tidak esensial Isi terlalu spesialistis. Isi tidak realistis, terlalu teoritis (status gizi tanpa
tabel tumbuh kembang). Tidak ada vignette. Vignette tidak berfungsi. Option irrelevant difficulties, test wiseness (bila tidak dapat direvisi)
Bekerja dalam kelompok untuk mereview soal-soal menggunakan formulir review yang ada.
