Blue Print untuk uji kompetensi Mengapadiperlukan Mengapadiperlukan?
Sari PuspaDewi KomiteBersama UjiKompetensiDokter Indonesia
sebuah Sistem Ujian Standarisasi Nasional
- Implementasi KB - 80% isi kurikulum - Syarat kelulusan
Benchmarking Regional
- Implementasi KB - Fase akademik ( diagnostik/treatme - Fungsi formatif
Sistem Ujian Institusi
- Implementasi KB - 100% isi kurikulu
Sistem Uji Kompetensi
rinsip KBK disertai evaluas uasi hasil belajar berbasis ompetensi (perubahan mind-set). mind
ji kompetensi = competence-based competence assessment ebagai longitudinal assessment, assessment UKDI (ujian andarisasi nasional/ uji ko kompetensi) bagian integra an komplementer terhadap ap sistem ujian kompetens stitusi.
ntohKasus:
orangperempuanberusia 29 tahun, G3P1A1, awakepoliklinikpadausiakehamilan usiakehamilan 34 ggukarenamerasaketida tidaknyamananpadaperu anatassebelahkiri. uhaninidirasakansetiapbayibergerak uhaninidirasakansetiapbayibergerak. belumnyatidakadapengalamansepertiitu belumnyatidakadapengalamansepertiitu. ienjugamerasanyeripad adabagianperutbawahda watirmengalamiprematur mengalamiprematur. dapatkontraksitanpakeluarnyacairan dapatkontraksitanpakeluarnyacairan, ahatausekretdari vagina. Riwayatobstetrik ya memperlihatkan uterus arkuatadarihasil HSG
enjelasanmekanismemahasiswa erus malformation (uterus uterus arkuata) less space for fetal movement ketidaknyamananpad adaperutbagianatasse ahkiri. gangguanpadapertum umbuhandanposisijani kelainankongenital, danletakplasenta etidaknyamanandankontraksi etidaknyamanandankontraksitandaawal salinan. enjelasan yang paling ungkindarikasusini: Kelainanposisijanindanpersalinan pre-
Menguji mahasiswa
aradigma lama: Apakahkonsekuensi yang itimbulkanoleh uterus arkuata? (karena 4 udahbenar, makadibuatkan KECUALI) berakhirdengan TAHU. aradigmabaru (competence competence-based): pakahmekanisme yang mungkinmendasarikeluhanpasiendiatas mungkinmendasarikeluhanpasiendiatas? berakhirdenganTAHU TAHUdanDAPAT MENGAPLIKASIKAN..
Usefulness off th the assessment
Usefulness = R x V x P x EI
• R = Reliability • V = Validity • P = Practical Acceptability Acceptability & Feasibility (cost) • EI = Educational Impact
Van derVleuten, 2001)
Aspek Praktik Baik Asupan
1. Blueprintingmetode ujian 2. Kontributor soal 3. Pedoman ujian 4. Dukungan IT
Proses
Luaran
1. Standarisasi kontributor soal 2. Proses review 3. Try-out Try item 4. Pengelolaan ujian 5. Pengelolaan bank soal
Standard settin
Mengapa Blue Print?
he blueprint = matrix. Outlines assessment in 3 major reas:
• Kompetensi yang ingindiujikan. • Materi • Instrumen yang digunakan.
Others:
• Description of Purpose. • Examinee. • Number of Items. • Timing • Scoring
Mengapa Blue Print? Memastikanbahwaterdap atkeseimbanganberbagai aspekpenilaian Penerapanberbagaimeto daujianbiasanyadibutuhk biasanyadibutuhk anuntukmencapaitujuan penilaianberdasarkan blue print Penggunaanberbagaiinst rumenpenilaianbalanc
e of strengths and weaknesses of each
Blueprinting vs metode ujian
Sample Blueprint int for Medicine for an MCQ and OSCE Examination Competency
MCQ OSCE
ommunication skills
10%
linical Skills
20%
pplication of Scientific basis knowledge
40%
anagement of health problems
30%
anagement of information
10%
70%
elf awareness & development
10%
hics, morals, professionalism
10%
Sample Blueprint for an MCQ Examination
inical asks Data hering Data pretation ynthesis Drug agement n-drug agement
Child Health 5
Maternal Adult health health 3 13
Mental health 5
Popula heal 4
6
3
17
6
4
2
2
10
4
0
2
1
10
3
0
Efektif
Kognitif
Recall
Reproductive
Pertumbuhan, perkembangan dan penyakit degeneratif
Promosi kesehatan dan pencegahan penyakit
n Dasar
Prosedural
Reasoning
Head and Neck
Kelainan genetik dan kongenital
Penapisan (Diagnosis)) (Diagnosis
medik, is & i pada keluarga
Konatif
Neurology and behaviour
Penyakit infeksi dan imunologi
Manajemen (Terapi)
Masalah Primer
Dermatomusculo skeletal
Penyakit neoplasma
Rehabilitasi
n Kritisi dan Informasi
HematoHematoimmunology
Penyakit akibat trauma atau kecelakaan
Aspek hukum dan etik
moral dan
n, dan gan
Cardiovascular
Gatrointestinal, hepatobilier, and pancreas Respiratory
Blue Prin UKDI
KomposisiSoalBerdasarkan SKDI % Soal SKDI
Distribusi Tingkat KesukaranSoalBerdasarkan SKDI
lue Print UKDI
mpilan Dasar s
asi Biomedis
nikasi
jemen Kes.Primer
usuran Informasi
ionalisme
embangan onal
lue Print UKDI
Kognitif
Procedural wledge
Konatif
lue Print UKDI
Recall
Reasoning
lue Print UKDI
f dan Perilaku ala dan Leher krin & abolisme ran Cerna, Hepat. ran Pernapasan
ung,Pemb.Darah& . ah & imun sistem otot, tulang, unak oduksi
lue Print UKDI
Pertumbuhan, enerasi
Kelainan Genetik ongenital
Peny. Infeksi
Peny. Trauma
Peny. Neoplasma
lue Print UKDI
Promosi ehatan
apisan/Diagno
Manajemen
Rehabilitasi
Aspek Hukum
lue Print UKDI
ndividu
Keluarga
Masyarakat
Competence Categories
ory Taking
sical Exam
s and Procedures
nagement
mmunication and Patient Education
Simple Blueprint CVS
RS
…
GI
…..
MSS
Endo/ Metab
Haem / Oncology
…
Competence Categories
Hierarchy The Hospital Setting CVS
RS
…
GI
TheCommunitySetting …..
CVS
RS
ory Taking
sical Exam
ts and Procedures
x x
x x
…
G
CVS
AMI (3B)
RS
TB Lung
Febrile Conv.
(SP)
GI
Diarrhea (pediatric)
Repro
Obgyn (contrasepti on)
MSS
Low Back Pain
HT fever
g
res
NB
Chest Xray
Haem/ Oncology
Thyroid (SP)
DHF Grade 3-4 (adult) (SP)
GUS
Head & Neck
Specia Sense
MildHearin Urinary Retentio Moderate Dissord n (3A, Head Injury (SP)
(SP)
depke
GCS
Assessm of heari
HT Thyroid
Reflex Examination
CPR
Endo/ Metab
IV line
IM injection
n
Diet Counseling
on
On malnutrition
Breaking bad news (breast malignancy)
Prescribe
(peds)
Suturing X-ray ray fracture
PE Thyroid
IV line
Catheteri zation
Blue Print DokterGigi Blue Print Perawat
Waktu Ujian vs Reliability
ReliabilitasSoal UKDI
Dukungan IT
Website ujian: jadwal, profil ujian, (pendaftaran), self-assessment assessment/quiz, (pengumuman hasil).
Item Bank: penyimpanan, pemilihan soal.
Pelaksanaan ujian: CBT, OSCE
Item Analysis
Standard setting:: OSCE
pilogue
Blueprint merupakanpijakanawalmeningkatkan usefulness dari assessment. Perlupenetapankeputusanberdasarkan value masin masingprofesi, dan review terusmenerus. Perlukomitmendalamupaya Perlukomitmendalamupayacontinuing quality mprovementberdasarkan berdasarkanlesson learnt mplementasimenujupraktik yang lebihbaik.
Terimakasih