Blueprint untuk Uji Kompetensi Mengapa diperlukan?
Setiawan Komite Bersama (KB) Uji Kompetensi Dokter Indonesia (UKDI
Uji Kompetensi sebagai sebuah Sistem Ujian Standarisasi Nasional
- Implementasi KBK - 80% isi kurikulum - Syarat kelulusan
Benchmarking Regional
- Implementasi KBK - Fase akademik (prediagnostik/treatment) - Fungsi formatif
Sistem Ujian Institusi
- Implementasi KBK - 100% isi kurikulum - Syarat kelulusan
Sistem Uji Kompetensi • Prinsip KBK disertai evaluasi hasil belajar berbasis
kompetensi (perubahan mind-set). • Uji kompetensi = competence-based assessment
sebagai longitudinal assessment, UKDI (ujian standarisasi nasional/ uji kompetensi) bagian integral dan komplementer terhadap sistem ujian kompetensi di institusi.
Contoh Kasus: Seorang perempuan berusia 29 tahun, G3P1A1, dibawa ke
poliklinik pada usia 34 minggu karena ketidaknyamanan pada perut bagian atas sebelah kiri. Keluhan ini dirasakan setiap bayi bergerak. Sebelumnya tidak ada pengalaman seperti itu. Pasien juga merasa nyeri pada bagian perut bawah dan khawatir mengalami prematur. Terdapat kontraksi tanpa keluarnya cairan, darah atau sekret dari vagina. Riwayat obstetrik yang lalu memperlihatkan uterus arkuata dari hasil HSG sebelum kehamilan ini. Kehamilan pertama berakhir dengan abortus, yang kedua terjadi prematur spontan.
Penjelasan mekanisme mahasiswa Uterus malformation --> less space for fetal movement -->
mild discomfort. Uterus malformation --> problem in fetal growth, fetal lie, congenital anomalies and placental position. Discomfort and contraction --> alarming sign for labor. The possible explanation for the case above: fetal lie problem, pre-term labor. Further information --> breech presentation.
Menguji mahasiswa: Paradigma lama: Apakah konsekuensi yang ditimbulkan oleh
uterus arkuata? (karena 4 sudah benar, maka dibuatkan KECUALI) --> berakhir dengan TAHU. Paradigma baru (competence-based): Apakah mekanisme
yang mungkin mendasari keluhan pasien di atas? --> berakhir dengan TAHU dan DAPAT MENGAPLIKASIKAN.
Usefulness of the assessment
Usefulness = f(( Reliability . Validity). Acceptability. Educational Impact. Cost)
Aspek Praktik Baik Asupan
1. Blueprintingmetode ujian 2. Kontributor soal 3. Pedoman ujian 4. Dukungan IT
Proses
Luaran
1. Standarisasi kontributor soal 2. Proses review 3. Try-out item 4. Pengelolaan ujian 5. Pengelolaan bank soal
Standard setting
Blueprinting vs metode ujian
Tinjauan 1: SKDI
Tinjauan 2
Tinjauan 3
Tinjauan 4
Tinjauan 5
Tinjauan 6
Tinjauan 7
Keterampilan dasar klinis
Kognitif
Recall
Reproduksi
Pertumbuhan, perkembangan, dan degenerasi
Promosi kesehatan dan pencegahan penyakit
Individu
Aplikasi biomedis, perilaku, klinis, & epidemiologi pada kedokteran keluarga
Prosedural
Reasoning
Kepala dan leher
Kelainan genetik dan kongenital
Penapisan (Diagnosis)
Keluarga
Komunikasi efektif
Konatif
Syaraf & Perilaku
Penyakit infeksi dan imunologi
Manajemen (Terapi)
Masyarakat
Manajemen masalah kesehatan primer
Dermatomuscul Penyakit oskeletal neoplasma
Penelusuran, kritisi, dan manajemen informasi
Hemato dan immunology
Profesionalisme, moral, dan etika praktik kedokteran
Cardiovascular
Kesadaran, pemeliharaan, dan pengembangan personal
Gatrointestinal, hepatobilier, dan pankreas Respiratory Urogenital Endokrin dan Metabolisme
Penyakit akibat trauma atau kecelakaan
Rehabilitasi
Distribusi Soal UKDI berdasarkan Tinjauan 1 100 90 80
UKDI 1
Prosentase
70
UKDI 2 UKDI 3
60
UKDI 4 UKDI 5
50
UKDI 6 UKDI 7
40
UKDI 8 30
UKDI 9 UKDI 10
20
UKDI 11 UKDI 12
10 0 0
1
2
3
4
5
Sub Tinjauan
6
7
8
1. 2. 3. 4. 5. 6. 7.
Ketrampilan dasar klinik (10-20%) Aplikasi biomedik, perilaku, klinikal dan epid. pada ked. kel. (40-60%) Komunikasi Efektif (10-20%) Manajemen Kes. Primer (10-20%) Penelusuran kritisi & manajemen informasi (2-5%) Profesionalisme, moral, dan etika prak. Kedokteran (5-10%) Kesadaran, pemeliharaan, dan pengembangan profesional (0%)
Distribusi Soal Berdasarkan Tinjauan 2
Distribusi Soal Berdasarkan Tinjauan 3
Prosentase
100 90
UKDI 1
100
80
UKDI 2
90
70
UKDI 3
80
60
UKDI 4
70
UKDI 5
60
UKDI 6
50
UKDI 7
40
UKDI 8
30
UKDI 9
20
UKDI 10
10
UKDI 11
0
50 40 30 20 10 0 0
1 Kognitif
2 Proc. Know. Sub Tinjauan
Konatif 3
UKDI 12
0
1
2 Sub Tinjauan
3
Distribusi Soal Berdasarkan Tinjauan 4 UKDI 1 20
UKDI 2
UKDI 3
UKDI 4
UKDI 5
UKDI 6
1
2
3
4
5
UKDI 7
UKDI 8
UKDI 9
UKDI 10
UKDI 11
UKDI 12
Prosentase
15
10
5
0 0
6
Sub Tinjauan
7
8
9
10
11
12
Prosentase
Distribusi Soal Berdasarkan Tinjauan 5 60.0
UKDI 1
55.0
UKDI 2
50.0
UKDI 3
45.0
UKDI 4
40.0
UKDI 5
35.0
UKDI 6
30.0
UKDI 7
25.0
UKDI 8
20.0
UKDI 9
15.0
UKDI 10
10.0
UKDI 11
5.0
UKDI 12
0.0
0
1
2
3
4
5
Sub Tinjauan
1. 2. 3. 4. 5. 6.
Pertumbuhan, perkembangan, dan degenerasi Kelainan genetik dan kongenital Penyakit infeksi dan imunologi Penyakit akibat trauma atau kecelakaan Penyakit neoplasma Lainnya (non Specified)
6
7
Distribusi Soal Berdasarkan Tinjauan 6 100.0 90.0 UKDI 1
Prosentase
80.0
UKDI 2
70.0
UKDI 3
60.0
UKDI 4 UKDI 5
50.0
UKDI 6
40.0
UKDI 7
30.0
UKDI 8 UKDI 9
20.0
UKDI 10
10.0
UKDI 11
0.0
UKDI 12 0
1
2
3
4
Sub Tinjauan
1. 2. 3. 4. 5.
Promosi kesehatan dan pencegahan penyakit Penapisan/Diagnosis Manajemen/Terapi Rehabilitasi Aspek hukum dan etik
5
6
Distribusi Soal Berdasarkan Tinjauan 7 100 90
UKDI 1
Prosentase
80
UKDI 2
70
UKDI 3
60
UKDI 4 UKDI 5
50
UKDI 6 UKDI 7
40
UKDI 8
30
UKDI 9 20
UKDI 10
10
UKDI 11 UKDI 12
0 0
1
Individu
2
Keluarga Sub Tinjauan
3
Masyarakat
4
Komposisi Soal berdasarkan SKDI
Kategori
Distribusi Faktor Kesukaran Soal berdasarkan Kategori Kompetensi 100% 90% 80% 70% 1
60%
0.9
50%
0.8
40%
> = 0.2 < 0.2
30%
0.2 0.1
20% 10% 0% 12
23A
33B
Kategori Kompetensi
44
Reliability soal
Simple Blueprint Competence Categories History Taking Physical Exam
Tests and Procedures
…..
Management
Communication and Patient Education
CVS
RS
…
GI
…..
MSS
Endo/ Metab
Haem / Oncology
….
Hierarchy The Hospital Setting Competence Categories
CVS
RS
…
GI
The Community Setting …..
CVS
RS
History Taking
Physical Exam
Tests and Procedures
…..
x x
x x
…
GI
Other Dimension Inpatient Competence Categories
CVS
RS
…
Outpatient/Ambulatory GI
…..
CVS
RS
History Taking Physical Exam Tests and Procedures …..
x x
x x
…
GI
Other Dimension The Child Competence Categories History Taking Physical Exam Tests and Procedures …..
CVS
RS
x
…
The Elderly GI
…. .
CVS
RS
x
…
GI
Other Dimension The Child Cognitive /Affective Categories
Recall
CVS
RS
…
The Elderly GI
…..
CVS
RS
x
x
x
x
Reasoning Affect Skill …..
…
GI
Competence Categories
CVS
RS
NB
GI
Repro
Case
AMI (3B)
TB Lung
Febrile Conv. (SP)
Diarrhea (pediatric)
Obgyn (contrasepti on)
Communication & Patient Education
Low Back Pain
Thyroid (SP)
DHF Grade 3-4 (adult) (SP)
Reflex Examination
CPR
Chest Xray
GUS
Head & Neck
Special Sense
IV line
IM injection
Prescribe
Diet Counseling On malnutrition
(peds)
Breaking bad news (breast malignancy)
Suturing X-ray fracture
Phsyciatry
Urinary MildHearing Schizoprenia Retentio Moderate Dissorders (SP) n Head Injury (3A, (3A, depkes) (SP) (SP) depkes)
HT Thyroid
Physical Exam
Management
Haem/ Oncology
HT fever
History Taking
Tests & Procedures
MSS
Endo/ Metab
Alloanamnesis
PE Thyroid
GCS
IV line
Catheteri zation
Assessment of hearing
Waktu Ujian vs Reliability
Epilogue Blueprint merupakan pijakan awal meningkatkan usefulness
dari assessment. Perlu decision based on the value, dan perlu ada review terus
menerus.
