Naskah Akademik Lembaga Pengembangan Uji Kompetensi Tri HanggonoAchmad Komponen 2 HPEQ Project
SistematikaPenulisan
Uji Kompetensi Tenaga Kesehatan
LatarBelakang Pengertian LandasanHukum Tujuandanmanfaat MetodePendekatan
Lembaga Pengembangan Uji Kompetensi (LPUK) RuangLingkup TugasdanFungsi StrukturOrganisasi Pembiayaan Milestone Pembentukan LPUK
Kesimpulan& Saran
LatarBelakang
MengapaperluUjiKompetensi? •PerluasanAkseskepusatlayanank esehatan •Jumlahinstitusipendidikanpengha siltenagakesehatanmeningkattaja mdalam 5 tahun •Kualitas&kuantitastenagakesehat an
Layanan Kesehatan PENDIDIKAN TENAGA KESEHATAN
LEGAL/HUKUM
•Terkaittenagakes ehatan •Pendidikantinggib erdasarkan KBK
Gambaran Jenis dan Jenjang Pada beberapa Pendidikan Tinggi Kesehatan Tahun 2010 Vokasi
Akademik
Spesialis
Bidang
Profesi D3
D4
S1
S2
S3
Dokter
-
-
71
22
11
Dokter Gigi
8
-
25
6
Perawat
288
-
308
Bidan
679
69
Farmasi
52
Gizi Kesmas
Total
Total Sp-1
Sp-2
35
211
1
351
2
12
10
-
63
3
1
-
1
-
601
2
1
-
-
-
-
751
-
51
8
2
22
-
-
135
3
-
24
1
3
-
-
-
31
-
-
143
24
2
1
-
-
170
1030
69
624
65
21
70
222
1
2102
Sumber: EPSBED, 2010
Result of Benchmarking 2005 Mean (%)
35.41
Standard Deviation
7.51
Highest Score
60.50
Lowest Score
13.00
Range
47.50
KR 21
0.77
Average Discrimination Index
0.19
Average Difficulty Factor
0.35
Faktoreksternal • Globalisasi: – WFME • doctors without country’s border, • Global accreditation of Medical schools 2015-20
– Freetrade: • MRA (Mutually Recognition Arrangement ) praktiktenagakesehatan ASEAN (2015) • 1700 dokterasingberencanamasuk Indonesia 2008
Tantangannasional dan global •Problem kesehatan multidimensional •Penerapanprinsip pendidikan •Penerapanaturan hukum
RESPONS INSTITUSI
StandarisasiKualitas&Kompetensi LULUSAN
UjiKompetensisecaraNasional
PengertianUjiKompetensiTenagaKesehatan
UjiKompetensiadalahujian yang dilaksanakandiakhirmasapendidikantenagakesehatan, sebelumpelaksanaansumpahprofesiuntukmenilaipencapaian kompetensisesuaiStandarKompetensidalamrangkamemper olehsertifikatkompetensi.
LandasanHukum Undang-undangRepublik Indonesia Nomor 20 tahun 2003 tentangSistemPendidikanNasionalpasal 61 PeraturanPemerintahRepublik Indonesia nomor 19 tahun 2005 tentangStandarNasionalPendidikan Khususuntukdokter/doktergigi: Undang-undangRepublik Indonesia nomor 29 tahun 2004 tentangPraktikKedokteran PerkonsilNomor 1/2005 tentangRegistrasi KeputusanKonsilKedokteran Indonesia Nomor 20/KKI/KEP/IX/2006 tentangPengesahanStandarPendidikanProfesiDokter KeputusanKonsilKedokteran Indonesia Nomor 21 A/KKI/Kep/IX/2006 tentang Standard KompetensiDokter Indonesia Khususuntukbidandanperawat PeraturanMenteriKesehatanNomor 161 Tahun 2010 tentangRegistrasiTenagaKesehatan
TujuandanManfaatUjiKompetensi
Tujuan
Untukmemberikaninformasipencapaiankompetensikepadapeme gangkewenangandalampemberiansertifikatkompetensi Mendukungpencapaianmututenagakesehatandi Indonesia
Manfaat Diperolehnyasalahsatukriteriapengakuankompetensi. Memberikanmasukankeinstitusipenyelenggarapendidikanun tukmeningkatkanmutupembelajaran. Sebagaistandarisasilulusan program pendidikanluarnegeri yang inginmengajukanijinpraktikdi Indonesia.
Pendidikan Dokter
Dokter (lulus – ijasah dokter)
Uji kompetensi Kompetensidokter(SKDI)
Sertifikasi
Registrasi
Lisensi
Tujuan Uji Kompetensi Untuk memberikan informasi kepada Otoritas Sertifikasi berkenaan kompetensi yang meliputi pengetahuan, ketrampilan, dan sikap dari para lulusan dokter umum secara komprehensif
Kerangka Ujian
Kompetensi (Clinical Competence)
CLINICAL
COMPETENCE
Knowledge
Skills
The ability A complex professional task. Integrating the relevant cognitive, psychomotor, and affective skills. Related to Patient Care w/
Attitudes
Clinical Problem Solving Newble, 2000
Consistency. Independence. Timeliness. Accuracy. Appropriateness.
Assessment of clinical competence
Behaviour~ attitude/skills
Cognition~ knowledge
Mini CEX
Does Shows how
UKDI=OSCEs
Knows how
EMQs, SEQs
Knows
UKDI=MCQs
Miller GE. The assessment of clinical skills/competence/performance. Academic Medicine (Supplement) 1990; 65: S63-S7.
Prinsip Ujian
Valid. Reliable. Practical. Impact on Learning.
What to assess ?
Assess all the Components
What do youknow? How do youthink? What can youdo? How do youbehave?
Knowledge Reasoning Skills Professionalism
Assess applicationand integrationof knowledge, not recall of knowledge Assess understanding not memorization
Aplikasipengetahuan denganujitulis/komputerd enganprinsippengembang ankey feature approach
Polapengembangandenga nmelibatkankerjasamains titusipendidikan&organis asiprofesi
MDE
Uji Kompetensi Keterampilanklinik&prof esionalismedalambentuk ujiketerampilanklinik
OSCE Penetapankelulusanolehp engampukebijakandengan prinsipitem based & performance based
Pengembangan&Pengelolaan Item LOCAL ITEM BANK ADMINIST.
REGIONAL ITEM BANK ADM.
NATIONA L ITEM REVIEW
ITEM BANK – 2
PANEL EXPERT
NATIONA L ITEM BANK ADM.
ITEM BANK- 1
NON_SCO RED ITEM
ITEM BANK – 3
ITEM SELECTION PROCESS
ITEM WRITER
QUESTIO N BOOK
ITEM BANK - 4
UjiKompetensisebagaise buahSistem UjianStandarisasi Nasional
- Implementasi KBK - 80% is ikurikulum - Syaratkelulusan
Benchmarking Regional
- Implementasi KBK - Faseakademik(prediagnostik/treatment) - Fungsiformatif
SistemUjianInstitusi
- Implementasi KBK - 100% isikurikulum - Syaratkelulusan
Nilai Batas Lulus UKDI XVI per Kelompok 70,0 61,4 60,0
59,9
60,2
56,7
58,0
58,6
Kel 4
Kel 5
Kel 6
55,6
54,8
Kel 7
Kel 8
50,0 40,0 30,0 20,0 10,0 0,0
Kel 1
Kel 2
Kel 3
Angoff Round 2
Angoff Round 1
Nilai Batas Lulus UKDI XVI 70,00
60,00
58,93
58,15
1
2
50,00 40,00 30,00
20,00 10,00 0,00
Komposisi Soal UKDI XVI berdasarkan SKDI 100 90 80 70 60 50
40 30 20 10 0
2
3A
3B
Level Kompetensi
4
Distribusi Tingkat Kesulitan Soal UKDI XVI Berdasarkan Level Kompetensi 100% 90% 80% 70%
32%
30%
50%
60%
Mudah
50%
Sedang
40% 30% 20%
66%
68%
3A & 3B
4
50%
10% 0% 2
Sulit
Distribusi Faktor Kesukaran Soal UKDI XVI berdasarkan Kategori Kompetensi 100% 90% 80%
1
70%
0.9
60%
0.8
50%
≥ 0.2
40%
< 0.2
30%
0.2
20%
0.1
10% 0% 2
3A & 3B
4
UKDI XIV vs. XV vs. XVI Kriteria
UKDI XIV
UKDI XV
UKDI XVI
Jumlah Judge
52
46
48
Rerata Total (SD)
66.4 (11.8)
66.7 (13.0)
63.3 (13.6)
Rerata 1st Taker (SD)
70.3 (10.9)
71.1 (11.8)
67.8 (13.2)
Rerata Difficulty Factor
0.65
0.65
0.62
ProsentaseSoal UKDI Level 4
33.7%
40.0%
45%
ProsentaseSoal UKDI Level (3A+3B+4)
85%
88%
89%
ProsentaseSoalBaik
39.0%
56.5%
73%
KR 21
0.95
0.95
0.95
Nilaibatas Lulus
58
58
58
Hasil UKDI (1st Taker) UKDI
Nilai Rerata
SD
Nilai tertinggi
Nilai terendah
KR-21 buku soal
I
49,59
10,65
76
26,0
0,89
II
56,37
13,62
86,5
19,0
0,94
III
51,77
13,62
87,5
17,0
0,94
IV
49,80
14,61
85,5
13,0
0,95
V
50,35
12,14
81,0
17,5
0,92
VI
57,30
15,73
89,0
18,5
0,96
VII
54,24
13,65
87,0
13,0
0,94
VIII
50,42
11,16
80,5
17,5
0,90
IX
50,87
12,48
85,5
5,5
0,92
X
52,99
10,92
77,0
14,5
0,91
XI
55,73
12,20
80,5
13,5
0,92
XII
55,70
11,82
81,5
20
0,92
XIII
60,90
14,02
88,5
21,5
0,95
XIV
70,35
10,90
91,5
19,0
0,94
XV
71,13
11,77
90,5
21,5
0,95
XVI
67,78
13,22
90,5
19,5
0,95
Perbandingan Hasil UKDI First vs Re-Taker UKDI
1 N peserta
st
Taker
Re-Taker
Failure Successf N rate (%) ul Rate peserta (%)
Failure Successfu rate (%) l Rate (%)
I II III IV V VI VII VIII IX
262 2150 1966 1422 1310 2166 1999 1351 1375
20.23 18.42 23.91 28.97 27.4 23.58 29.86 34.49 32.65
79.77 81.58 76.09 71.03 72.6 76.42 70.14 65.51 67.35
n.a 48 368 460 393 346 468 531 806
n.a 83.33 80.99 63.69 60.05 90.75 71.15 75.52 75.56
X
2584
35.06
64.94
966
XI
1835
32.32
67.68
XII
1728
31.42
XIII
1982
XIV
Pass Retaker mark Lulus lewat ujian tulis
16.67 19.01 36.31 39.95 9.25 28.85 24.48 24.44
40 44 45 45 45 50 50 50 50
n.a 8 69 167 157 32 135 130 197
90.37
9.63
50
139
1370
55
45
51
613
68.58
1327
63.6
36.4
51
483
28.36
71.64
1338
71.38
28.62
53
383
2596
12.8
87.2
1338
43.5
56.5
58
756
XV
3111
13.89
86.11
1023
48.09
51.91
58
531
XVI
1723
20.55
79.45
827
63.12
36.88
58
305
Rerata UKDI XVI Institusi Wilayah AIPKI 1 100 90 80 70
60 Total
50
1st Taker
40
Retaker
30 20 10 0
1
2
3
4
5
6
7
8
9
Rerata UKDI XVI Institusi Wilayah AIPKI 2 100 90 80
70 60 Total
50
1st Taker
40
Retaker
30 20
10 0
1
2
3
4
5
6
7
8
9
10
Rerata UKDI XVI Institusi Wilayah AIPKI 3 100 90 80 70
60 Total
50
1st Taker
40
Retaker
30 20 10 0 1
2
3
4
5
6
Rerata UKDI XVI Institusi Wilayah AIPKI 4 100 90 80 70
60 Total
50
1st Taker
40
Retaker
30 20 10 0 1
2
3
4
5
6
7
8
9
10
11
Rerata UKDI XVI Institusi Wilayah AIPKI 5 100 90 80 70
60 Total
50
1st Taker
40
Retaker
30 20 10 0 1
2
3
4
5
6
7
8
Rerata UKDI XVI Institusi Wilayah AIPKI 6 100 90 80 70
60 Total
50
1st Taker
40
Retaker
30 20 10 0 1
2
3
4
Successful Rate UKDI 1st Taker vs. Retaker 100 90 80 70 60 50 40 30 20 10 0 1
2
3
4
5
6
7
1st Taker
8
9
Retaker
10 11 12 13 14 15
Prosentase Retaker Terhadap Total Peserta 100 90 80 70 60 50 40 30 20 10 0 1
2
3
4
5
6
7
8
9
UKDI
10
11
12
13
14
15
16
LEMBAGA PENGEMBANGAN UJI KOMPETENSI
RuangLingkup
Lembagaujiannasionalmandiri yang berbadanhukum yang bertanggungjawabterhadapimplementasi, pengesahandanpe ngembanganstrategi, metodologisertaperangkatujidalamme ngevaluasikompetensisertaaspekpengembanganpenentuan batas lulus dantransparansidalammengelolaujian remedial Program pendidikan yang dicakupadalah D3, akademik (S1), profesi (dokter, doktergigi, ners) sebelummereka lulus pendidikandariinstitusinyamasing-masing. Padatahapawaluntukevaluasipesertadidikinstitusipendidika ndokter, doktergigi, perawat, danbidan
Tugas&Fungsi: Pelayanan, bekerjasamadenganinstitusipen didikan Mengadakan
dan mengembangkan sarana dan prasarana serta sumber daya manusia yang diperlukan dalam menunjang proses penguatan pengelolaan dan administrasi ujian, hasil serta pengumuman ujian, berupa: Sarana
dan prasarana penunjang pengelolaan ujian, berupa sistem informasi uji kompetensi nasional bagi tenaga kesehatan, di tingkat nasional dan regional, yaitu:
Sistem Aplikasi Pengelolaan pembuatan, penelaahan (review), dan penggunaan bersama (sharing) dari soal-soal ujian yang berkualitas (Item Bank Administration) Sistem Aplikasi Pengelolaan registrasi dan administrasi terpadu peserta ujian secara online (Online Registration) Sistem Aplikasi Pelaksanaan ujian tulis dalam bentuk Computer Based Testing (CBT) dan pengelolaan administrasi hasil dan nilai ujian
Sumber
daya manusia pengelola yang mengerti akan ujian dengan kepentingan tinggi (High Stake Examination)
Tugas&Fungsi: Pelayanan, bekerjasamadenganinstitusipen didikan Meningkatkan
kapasitas sumber daya manusia melalui pelatihan pengembangan materi uji, mengelola bank soal dan penentuan batas lulus Menjamin keabsahan, kehandalan, kepraktisan, keamanan, dan ketahanan penyelenggaraan uji kompetensi nasioanl, baik dakam bentuk ujian tulis dan OSCE, melalui penelitian pada desain ujian dan analisis statistik Menjamin standar materi ujian sesuai dengan kisi-kisi (blueprint) Menjamin hasil penentuan batas lulus ujian yang dapat merefleksikan standar optimal Menjamin keberlanjutan pelaksanaan ujian secara efektif dan efisien di masing-masing regional melalui
Tugas&Fungsi: Akademik
LPUK dalammelayanipenyelenggaraanujianberperansebagainarasumbe rdanfasilitatorbagipenyelenggaraujiandimasing-masingprofesi. Organisasiinitidakmemilikiperandalammenentukankeputusan, ya ng dalamhaliniterdapatpadaketetapandimasingmasingprofesitenagakesehatan, antara lain sepertipenentuanmateriujiandanpenetapanbatas lulus.
StrukturOrganisasi DewanPenasihat Direktur
Pengelolaandi Nasional
Sekretaris Eksekutif Divisi Pengelolaan Ujian
Divisi Bank Soal
Divisi Pengelolaan Aset
Divisi Pengelolaan TI
Pengelolaandi Regional CBT Center
PusatUjian 44
OSCE Center
Divisi Litbang
RegionalisasiPengelolaan LPUK
UntukImplementasiUjiNasionalbagiKeperawatandanBidan, akandilakukansub -regionalisasi.
Regional I: Sumatera kec. Lampung
Regional II: Jakarta
Regional III: Banten, Jawa Barat+Lampung
Regional IV: Jawa Tengah+Yogya+Kalimantan
Regional V: Jawa Timur, Bali, NTT, NTB
Regional VI: Sulawesi, Maluku, Papua
Pembiayaan Prinsippembiayaan pembiayaandarimanapunsumbernyaharustetapmenjaminkemandirianlembaga. pembiayaanmampumenjaminkeberlangsunganfungsiLembaga. Sumberpembiayaan Pesertaujian Asosiasiinstitusipendidikan Organisasiprofesi Pemerintah Masyarakat Organisasi lain yang tidakbersifatmengikat Padatahapawalpembiayaan LPUK menggunakanbiaya yang berasaldariproyek HPEQ. Mulaitahun 2015, pembiayaankegiatan LPUK berasaldariupayalembagasendirimelaluiberbagaipelayanan yang dilakukanberkaitandengansistemujiansesuaidenganfungsilembagaini.
Tahapanpengembangan
Main Activity
2010
NACE-HEALTHPro
preparation
Computer-based Testing (CBT)
Paper-based, Preparation&Try out Preparation
Objective Structured Clinical Examination (OSCE)
Preparation
Preparation
National Item Bank Networking for Assessment (NIBNA)
Preparation
Preparation
2011 establishment
Implementation
Preparation
2012 mid-term evaluation Implementation
Preparation and Try Out
2013 Final evaluation
2014 sustainable
Implementation
Implementation
Implementation
Implementation
Try-out
Implementation
Implementation
Implementation
Preparation
Preparation
Try out
Implementation
Establishment
Enhancement for Pre-clinical Formative Test
Enhancement for Clinical Formative Test
Enhancement for Progress Test
Preparation
Preparation
Preparation
Establishment
Medicine/Dentist Nurse/Midwife
Milestone Pembentukan LPUK 2010 – 2014: Fase akselarasi Program dan Ekspansi Kegiatan
Sebelum 2010: Fase awal Pengembangan
Pengembang an KBUKDI & KDGI Pembentukan KNUKP
Kerja sama dengan profesi lain
Penyelesaian naskah akademik dan pedoman ujian Resource Sharing
Workshop nasional pengembangan dan review soal serta standard setting Pelaksanaan uji kompetensi untuk dokter dan dokter gigi dan di beberapa MTKP
Setelah 2014: FasePeningkatanKualitasKeberlanjuta n
Kerja sama regional dan internasional
Benchmarking internasional Pelatihan terstruktur berjenjang Hibah Penelitian & Publikasi ilmiah
Pengembanganujian re-sertifikasi& professional behaviour
Penyediaan sarana & prasarana, terma suk software Terbentuk LPUK & ujian perolehan standar mutu
Pedoman&aturan yang telahdihasilkan
PedomanPengembangandanPelaksaanaanUjiPengetahuanun tukujitulis/komputer PedomanPendaftaranUjiKompetensiTenagaKesehatan Indonesia PedomanPenangananRetakerUjiKompetensi Tata TertibUjiKompetensiTenagaKesehatan Indonesia PedomanPelatihanterkait OSCE (Pengembangan station, penguji, SP, KoordinatorPusatUjian)
Kesimpulan
Denganmelihatkebutuhanmasyarakatakanpelayanankesehatan yang berkualitas, perkembanganiptek, danglobalisasisertakondisisistemakreditasisaatini, makadiperlukansuatuujikompetensitenagakesehatan Ujikompetensitersebutdilaksanakanolehsuatulembagapengemba nganujikompetensiuntukpeningkatankualitaspenyelenggaraanuji kompetensi. Strukturdanmanajemenlembagadisesuaikandenganfungsidanrua nglingkup LPUK memilikitahapanperkembanganawalsebelumtahun 2010 yang mengalamiakselarasi program danekspansikegiatanpadaperiodatahun 2010 - 2014 danupayapeningkatankualitasberkelanjutansetelahtahun 2014.
Saran
Diperlukanpembentukanlembagapengembanganujikompet ensi (LPUK) yang mandiri, berbadanhukumdandikeloladengantatapamong yang baik. Regulasikhususdalambentukperaturanmenteriatauperatura n lain yang memayungipembentukan LPUK. Pembiayaanharusmenjaminkemandiriandankeberlangsunga nfungsilembaga. Keterlibatan yang aktifdariparapemangkukepentingansejakperencanaan, implementasi, monitoring danevaluasikinerjalembagaharusmenjadikekuatanutama.
Terimakasih
[email protected] [email protected]