HPEQ PROJECT 2012 WO
LAPORAN PELATIHAN PENGUJI OSCE KG WILAYAH BARAT GEL 2 Komponen 2 - Health Professional Education Quality (HPEQ) Project
Premier Basko Hotel Padang, 17-18 September 2012
Direktorat Pembelajaran dan Kemahasiswaan Direktorat Jenderal Pendidikan Tinggi Kementerian Pendidikan Dan Kebudayaan
WORKSHOP KOMPONEN 2 – SEPTEMBER 2012
Page 1
HPEQ PROJECT 2012 WO
1. Pendahuluan Komponen 2 HPEQ Project bertujuan untuk meningkatkan kompetensi tenaga kesehatan melalui peningkatan kualitas sistem ujian. Salah satu fokus kegiatan adalah peningkatan sistem ujian dengan pengembangan metode ujian yang menguji keterampilan klinik dalam bentuk Objective Structured Clinical Examination (OSCE). Objective Structured Clinical Examination (OSCE) pada Uji Kompetensi Dokter Gigi Indonesia (UKDGI) telah tahap implementasi pada UKDGI di mulai Periode I Bulan Januari 2012. Terhadap pelaksanaan implementasi tersebut telah dilaksanakan evaluasi yang salah satu hasilnya menunjukkan bahwa salah satu titik lemah penyelenggaraan OSCE adalah banyaknya penguji yang tidak mengisi borang cek list dengan lengkap. Hal ini dapat merugikan peserta ujian karena adamya item item tertentu yang tidak diberi penilaian oleh penguji di lembar cek list. Sebagai tindak lanjut temuan tersebut dipandang perlu mengembangkan sistem ujian OSCE dalam bentuk TI (berbasis komputerisasi) dimana cek list tidak menggunakan kertas tetapi menggunakan software di komputer sehingga memudahkan para penguji dalam menilai. Pada program software ini apabila ada item cek list yang belum diisi maka secara otomatis komputer akan memberi sinyal dan dokumen tidak bisa dikirim ke server. Oleh sebab itu kemungkinan cek list tidak diisi penguji dengan lengkap bisa dihindarkan. Untuk sosialisasi dan memahami sistem pengisian cek list menggunakan program di komputer maka dipandang perlu diadakan pelatihan kepada para penguji OSCE agar mereka dapat menjalankan program tersebut, dapat digunakan dengan efektif dan efisien dan untuk meminimalisir kesulitan kesulitan yang mungkin terjadi.
2. Tujuan
Tercapainya kesamaan persepsi mengenai tugas Penguji OSCE. Penguji OSCE memahami cara menilai dan mengisi Penilaian (Check List) OSCE mengunakan software di komputer. Mengurangi kesalahan Penguji OSCE dalam mengisi Penilaian (Check List) OSCE Menghasilkan metoda yang efektif dan efisien dalam ujian OSCE pada UKDGI.
3. Output Workshop
Penguji OSCE memahami tugasnya, Penguji OSCE dapat memahami cara kerja program pengisian cek list berbasis software di komputer dan dapat menggunakannya
WORKSHOP KOMPONEN 2 – SEPTEMBER 2012
Page 2
HPEQ PROJECT 2012 WO
Penguji OSCE dapat melakukan penilaian dan pengisian Lembar Penilaian (Check List) dengan benar menggunakan sistem software di komputer
4. Tempat, Waktu dan Peserta Pelatihan Penguji OSCE Kedokteran Gigi Wilayah Barat Gelombang 2 ini dilaksanakan pada tanggal 17-18 September 2012 di Premier Basko Hotel, Padang dengan mengundang penguji OSCE dari 12 IPDG yang termasuk dalam wilayah barat. Berikut adalah persyaratan peserta yang menjadi penguji OSCE:
Dosen tetap, minimum bergelar Strata 2 atau Spesialis Pernah mengikuti pelatihan Penguji OSCE Nasional/ Institusional dan pernah menjadi Penguji UKDGI (Kecuali bagi IPDGI yang belum meluluskan. Membawa laptop/notebook dan mampu mengoperasikan komputer dengan baik
Berikut adalah rekapitulasi jumlah peserta yang hadir dalam pelatihan kali ini: No
15
Nama Wilda Hafny Lubis Nuridiana Olivia A Hanafiah Suci Erawati Riani Setiadhi Risti Saptarini Abel Tasman Yuza Komang KD Yulia Rachma Evie Lamtiur P Zaki Mubarak Dharli Syafriza Vinna Kurniawati Badi Soerachman Widya Irsyad
16
Anadina Imagita
FKG UI
17
Bramma K Siti Triaminingsih Didin K
FKG UI
[email protected] [email protected] ,
[email protected] [email protected]
FKG UI
[email protected]
08121939492
FKG UNAND
[email protected]
0811257750
1 2 3 4 5 6 7 8 9 10 11 12 13 14
18 19
Institusi
Email
Tlp
FKG USU
[email protected]
08126000012
FKG USU
[email protected]
081362006476
FKG USU
0811606249
PSKG UNPRIMA FKG UNPAD FKG UNPAD
[email protected] [email protected] [email protected]
081265410449 08122331455 08157000890
FKG UNPAD
[email protected]
0817212232
FKG UPDM (B) FKG UPDM (B) FKG UPDM (B) PSKG UNSYIAH PSKG UNSYIAH
[email protected] [email protected] [email protected]
081388992155 081510500500 0818732325 0811683054 08126981978
[email protected] [email protected]
PSKFG Maranatha
[email protected]
08122115650
PSKG UNJANI
[email protected]
08122337998
FKG UNJANI
081394622737
WORKSHOP KOMPONEN 2 – SEPTEMBER 2012
08129272408 081310229064
Page 3
HPEQ PROJECT 2012 WO
20 21 22 23
FKG UNAND FKG UNBRAH FKG UNBRAH FKG UNBRAH
[email protected] [email protected] [email protected] [email protected]
08126702965 085263738078 081363233733
FKG UNBRAH
[email protected]
081374444936
25
Hidayati Yenita Alamsyah Fitria Malliza Resa Ferdina Okmes Fadriyanti Efa Ismadiyanti
FKG UNBRAH
[email protected]
085263143729
26
Dhona Afriza
FKG UNBRAH
[email protected]
27 28 29
Edrizal
FKG UNBRAH FKG UNBRAH PSKG FK UNSRI
[email protected]
08126797983 081330478336
[email protected]
081373517125
KDGI KDGI KDGI KDGI
[email protected] [email protected] [email protected]
24
30 31 32 33
Ricky Amran
Arya Prasetya B Indrayadi Gunardi Anggraeny Putri Ade Prijanti Rahmi Amtha
08561137211 08111903975 08161650582
Dari total 24 peserta wajib dari 12 institusi, semua institusi telah mengirimkan perwakilannya. Beberapa institusi juga mengirimkan satu peserta tambahan, bahkan FKG Unbrah menambah 5 orang penguji mengingat lokasi institusi ini dekat dengan lokasi pelatihan sehingga tidak membutuhkan transportasi dan akomodasi khusus. Narasumber untuk pelatihan penguji OSCE ini adalah core team KG sendiri dan juga dua orang IT Pusat. Seluruh coreteam dan IT Pusat datang. Berikut adalah rekapitulasinya: No Nama 1 Mia Damiyanti 2 Boedi O Roeslan Haslinda Z 3 Tamin 4 Mei Syafriadi Wiwiek 5 Poedjiastuti 6
Iwan Dewanto
7
Utmi Arma
8
Anggit Wirasto Herman Yuliansyah
9
Institusi Core Team/ FKG UI Core Team/ KDGI
Email
[email protected] [email protected]
Tlp 0811102644 0811906793
Core Team/ FKG USU
[email protected]
08126008495
Core Team/ FKG UNEJ
[email protected] Core Team/ KDGI Core Team/ PSKG UMY Core Team/ FKG UNBRAH IT Pusat KDGI IT Pusat KDGI
081336181168
[email protected] 0811977065
[email protected]
081578704082
[email protected]
08126770599
[email protected]
081328720809
[email protected]
081328557057
WORKSHOP KOMPONEN 2 – SEPTEMBER 2012
Page 4
HPEQ PROJECT 2012 WO Participation rate pada pelatihan ini sangat baik dimana semua peserta dan narasumber yang diundang hadir 100% bahkan terdapat 5 IPDG dan KDGI yang mengirimkan peserta tambahan. 5. Metode Pelaksanaan Workshop Pelatihan ini akan diberikan dengan cara:
Pemaparan materi oleh narasumber Contoh kasus dan Demonstrasi/simulasi dengan OSCE-station Praktek menggunakan software cek list OSCE dengan komputer Diskusi
Acara dimulai terlambat 40 menit karena ada beberapa perwakilan institusi yang belum hadir. Secara umum, acara berjalan sesuai TOR namun ada beberapa penyesuaian jadwal acara dan pemberi materi. Meskipun demikian, nilai substansi dari tiap materi yang diberikan oleh narasumber tidak berkurang. Berikut adalah rundown acara workshop pada kondisi riil: Senin, 17 September 2012 14.40 – 14.50 Pembukaan 14.50 – 15.10 Pengarahan OSCE UKDGI
Boedi O Roeslan Wiwiek P
15.10 – 15.15
Iwan Dewanto
Diskusi
Aplikasi Penilaian OSCE Berbasis Komputer 15.35 – 16.30 Diskusi dan Simulasi 16.30 - 17.20 Template Soal dan Video Simulasi 17.20 - 20.10 ISHOMA Demonstrasi Penggunaan Check list 20.10 - 21.00 OSCE (video 1) Selasa, 18 September 2012 Demostrasi Penggunaan Checklist 09.00 - 10.00 OSCE (video 2) 09.00 – 10.00 Diskusi 15.15 – 15.35
10.00 - 11.00
Wrap Up dan penutupan
Anggit Wirasto Mei Syafriyadi Wiwiek P Panitia Anggit Wirasto
Anggit Wirasto Wiwiek P Boedi O Roeslan
6. Hasil Kegiatan Workshop ini diawali pembukaan dari Prof Boedi O Roeslan selaku Ketua KDGI terkait pelatihan ini. Prof Boedi menjelaskan bahwa pelatihan ini merupakan bagian dari TOT
WORKSHOP KOMPONEN 2 – SEPTEMBER 2012
Page 5
HPEQ PROJECT 2012 WO karena tidak mungkin mengundang seluruh penguji OSCE di iPDG. Oleh karena itu, perwakilan yang ikut pada pelatihan ini diharapkan dapat mengajarkan juga hal-hal yang telah diberikan kepada penguji OSCE lainnya di institusi (pelatihan serupa di tingkat institusi). Materi selanjutnya disampaikan oleh drg Wiwiek yaitu materi refreshing mengenai pelaksanaan OSCE UKDGI, peran penguji, dan beberapa hal yang perlu diperhatikan oleh penguji dalam sebuah ujian OSCE. Selanjutnya drg. Iwan Dewanto memberikan arahan mengenai aplikasi penilaian OSCE berbasis komputer. Beliau menekankan bahwa penggunaan komputer untuk penilaian OSCE ini pada awalnya memang akan lebih sulit, namun ke depannya akan mempermudah dan mempercepat analisis serta mencegah kesalahan. Untuk itu, diharapkan institusi telah mencoba dulu aplikasi ini sebelum ujian sehingga bisa didapatkan feedback dan perbaikan untuk kelancaran pada UKDGI bulan Oktober. Sesi berikutnya dilanjutkan dengan diskusi dan pemutaran video simulasi pengisian checklist dalam bentuk aplikasi komputer yang kemudian langsung dipraktekan dengan pengisian checklist komputer. Pada TOR awal, di hari kedua direncanakan ada pembagian kelompok untuk simulasi pengisian checklist ini, namun dalam pelaksanaannya, pengisian checklist komputer ini dilakukan secara bersama-sama. Berdasarkan hasil workshop yang telah dilaksanakan selama 2 hari, output dari workshop pelatihan penguji OSCE secara umum adalah sebagai berikut: No.
KOMPONEN
TARGET
REALISASI
1.
Jumlah institusi yang mengirim peserta dalam workshop
12
12
2.
Jumlah peserta workshop
24
33
3.
Jumlah narasumber
9
9
Berdasarkan hasil rekapitulasi output workshop secara umum, dapat disimpulkan bahwa pencapaian target workshop ini sudah optimal dalam semua komponen. Peserta diharapkan mengadakan pelatihan penguji OSCE di institusinya masing-masing. Berdasarkan kesepakatan tersebut, sebaiknya masing-masing peserta dapat menyusun plan of action yang strategis untuk mendiseminasikan materi dan skill yang didapat dalam pelatihan kali ini ke penguji OSCE lainnya di institusi masing-masing.
WORKSHOP KOMPONEN 2 – SEPTEMBER 2012
Page 6
HPEQ PROJECT 2012 WO 7. Refleksi Setelah dilakukan analisa hasil kegiatan, selanjutnya perlu dilakukan refleksi sebagai bentuk evaluasi pelaksanaan pelatihan ditinjau dari perspektif peserta, fasilitator, dan tim monev secara umum. Berikut adalah refleksi pelaksanaan workshop dari beberapa perspektif tersebut : Gambaran Umum
Participation rate dari peserta sangat baik terlihat dari jumlah penguji tambahan yang hadir untuk mengikuti pelatihan. Acara berjalan dengan lancar meskipun dari segi penggunaan waktu tidak efektif (seringkali dimulai terlambat dan selesai lebih cepat).
Narasumber 1. Apakah peserta sudah memahami tugasnya sebagai penguji? Sudah, karena sudah pernah melakukan pelatihan 2. Apakah penguji OSCE sudah dapat melakukan penilaian dan pengisian lembar penilaian yang benar dengan menggunakan sistem software di komputer? Sudah, namun masih ada yang mengisinya belum lengkap Sudah, namun perlu segera melakukan TOT di masing-masing institusi 3. Apakah peserta dirasa telah mampu untuk menjadi trainer pelatihan sejenis di tingkat institusi? Iya, namun perlu bekerjasama dengan koordinator lokal dan IT lokal Kemungkinan besar bisa dan akan diuat schedule untuk memeriksa hal tersebut Sudah cukup mampu, namun perlu ditetapkan dari 3 orang yang diutus, ditetapkan 1 orang untuk bertanggungjawab mengurus pelaksanaan TOT di institusi Mampu, karena yang dikirim sudah mengerti dan memahami 4. Rekomendasi untuk perbaikan workshop ini dan strategi untuk menjaga sustainability workshop di tingkat institusi? Perlu ada monitoring serta langsung dilakukan workshop di tingkat institusi Perlu ada evaluasi pelaksanaan TOT di IPDG Tetapkan jadwal TOT di institusi Pembuatan borang evaluasi pelaksanaan TOT di tingkat institusi, permasalahan yang terjadi dan kemungkinan solusi atau jalan keluar
WORKSHOP KOMPONEN 2 – SEPTEMBER 2012
Page 7
HPEQ PROJECT 2012 WO
Perbaikan software dimana bila penguji selesai, hasilnya dapat dilihat kembali oleh penguji.
Peserta 1. Hal yang dapat menjadi kendala dalam penggunaan software untuk pengisian lemar penilaian/ checklist? Kestabilan jaringan wifi dan juga aliran listrik Kompabilitas web browser Ketidaksiapan SDM di institusi Sarana dan prasarana misal komputer dan peralatan IT lainnya Ketrampilan penguji dalam menggunakan komputer beragam 2. Hal yang perlu disempurnakan dari lembar penilaian/ checklist? Lebih detail, setiap satu prosedur dinilai dengan satu checklist, saat ini ada beberapa prosedur yang digabungkan menjadi satu penilaian, sehingga menyulitkan Lebih sering diadakan pelatihan sehingga penguji terbiasa Pemberian tanda tertentu bila ada poin yang belum terisi 3. Hal yang perlu diperbaiaki dalam persiapan pelaksanaan OSCE UKDGI ke depan? Persiapan untuk IT Keseragaman istilah atau terminologi dalam pembuatan soal Koordinasi dan persiapan dengan waktu yang lebih lama Perlu dilakukan try out untuk melihat kesiapan setiap institusi Lebih sering melakukan pelatihan untuk setiap team yang terlibat dalam OSCE UKDGI Review soal yang lebih baik lagi Perlunya pemahaman dahulu kepada setiap pengawas tentang tatalaksana dan peraturan sebagai penguji yang benar Memberikan panduan penguji 30 menit sebelum ujian dimulai Undangan untuk pelatihan dan rapat koordinasi mohon dapat diberikan minimal 1 minggu sebelumnya sehingga dapat dipilih staf yang benar-benar berkomitmen dan kompeten.
WORKSHOP KOMPONEN 2 – SEPTEMBER 2012
Page 8
20 18 16 14 12 10 8 6 4 2 0 00 0 1 18
12
00 0 1 00
WORKSHOP KOMPONEN 2 – SEPTEMBER 2012 15 13
9 16
10
00 00 10
11
10
0 1 0
Kenyamanan tempat pelaksanaan pertemuan menunjang produktivitas
18
Responsiveness pelayanan yang diberikan oleh panitia baik
12 15 13 S
TOR kegiatan memberi gambaran pelaksanaan dan target yang hendak dicapai
15 TS
Setelah mengikuti workshop, kemampuan peserta meningkat dalam mengisi lembar penilaian/ cek list OSCE serta mampu menjadi trainer di tingkat institusi
STS
Diskusi permasalahan dan kendala yang mungkin terjadi dalam pengisian lembar penilaian berjalan dengan baik serta membantu dan memudahkan penguji untuk memahami cara …
16
Simulasi pengisian lembar penilaian/ cek list OSCE telah membantu dan memudahkan penguji untuk memahami cara kerja dan melakukan pengisian lembar penilaian/ cek list…
10
Video pelaksanaan OSCE yang digunakan untuk simulasi pengisian lembar penilaian/ cek list OSCE cukup jelas dan memudahkan penguji untuk memahami cara kerja dan melakukan …
18
Video demonstrasi cara melakukan pengisian cek list OSCE dengan komputer telah membantu anda untuk memahami cara kerja dan melakukan pengisian lembar penilaian/ cek list…
Pemaparan terkait “Aplikasi Penilaian OSCE Berbasis Komputer” telah dibawakan dengan jelas dan mudah dimengerti
Pemaparan terkait “OSCE UKDGI” telah dibawakan dengan jelas dan mudah dimengerti
HPEQ PROJECT 2012
WO
Tim Monev
Feedback form didistribusikan oleh tim monev kepada seluruh peserta untuk menjaring “voice of customer” peserta terkait satisfaction level terhadap aspek-aspek pelaksanaan workshop. Dari 33 kuesioner, 28 yang kembali ke tim monev. Berikut adalah rekapitulasinya:
Rekap Feeback Pelatihan Penguji OSCE KG Wilayah Barat Gel 2 17-18 Septemer 2012 SS 17 16
11
1
Analisis lebih lanjut terhadap feedback peserta, peserta merasa pemaparan materi yang dilakukan selama pelatihan sudah diawakan dengan jelas dan mudah dimengerti serta mampu membantu peserta untuk memahami dan melakukan pengisian checklist OSCE dengan komputer. Faktor yang dinilai sedikit kurang memuaskan adalah tentang kejelasan TOR kegiatan.
Page 9
HPEQ PROJECT 2012 WO 8. Rencana Tindak Lanjut Berdasarkan analisa output kegiatan, evaluasi pelaksanaan workshop, refleksi dan feedback dari peserta workshop beberapa hal yang dapat direkomendasikan sebagai bentuk improvement dan rencana tidak lanjut untuk menjaga sustainability output dan outcome dari workshop ini adalah sebagai berikut : - Pelatihan sejenis di tingkat institusi dengan jadwal yang jelas dan supervisi dari pusat (monitoring dan evaluasi) sehingga dapat dipastikan TOT berjalan di tingkat institusi - Persiapan komputer dan peralatan IT lainnya di institusi sehingga bentuk pengisian checklist berbasis komputer ini untuk OSCE UKDGI dapat segera dilaksanakan - Uji coba OSCE dengan aplikasi ini sebelum OSCE UKDGI yang sesungguhnya sehingga bila ada kendala atau masalah dapat dicarikan solusinya 9. Penutup Pengembangan sistem ujian kompetensi dokter gigi dangan menilai kemampuan psikomotor menggunakan metode OSCE merupakan terobosan baru dan akan meningkatkan kualitas tenaga kesehatan. Namun disadari bahwa metoda ini memerlukan persiapan, pelaksanaan dan evaluasi yang baik secara terus menerus, sehingga permasalahan teknis yang ada saat pelaksanaan dapat diminimalisir. Oleh karena itu senantiasa harus dilaksanakan evaluasi dan pengembangan program untuk mendapatkan metoda ujian yang baik sehingga ujian kompetensi yang merupakan high stake exam dapat tercapai pada Ujian Kompetensi Dokter Gigi Indonesia.
Lampiran Point of Discussion Database Panel Expert Materi Presentasi
Jakarta, 25 September 2012 Hilda Dwijayanti Asisten Monev Proyek HPEQ
WORKSHOP KOMPONEN 2 – SEPTEMBER 2012
Page 10