HPEQ PROJECT 2011 WO
LAPORAN PELATIHAN ITEM REVIEW PROFESI BIDAN GELOMBANG I
Hotel Ambhara Jakarta, 18 – 19 Juni 2011 Direktorat Akademik Direktorat Jenderal Pendidikan Tinggi Kementerian Pendidikan Nasional
WORKSHOP KOMPONEN 2 – JUNI 2011
Page 1
HPEQ PROJECT 2011 WO
1. Pendahuluan Upaya peningkatan sistem ujian pada pendidikan tenaga kesehatan khususnya bidan yang menjadi salah satu fokus Komponen 2 HPEQ Project mensyaratkan adanya suatu proses pembuatan soal ujian yang berkualitas, komprehensif, dan sesuai dengan tingkat kompetensi yang diharapkan. Salah satu metode ujian yang akan digunakan adalah ujian tertulis dengan dukungan teknologi berbasiskan komputer atan disebut juga sebagai computer-based testing (CBT). Dalam persiapan ujian CBT ini diperlukan soal yang kredibel, melalui satu proses pembuatan soal sesuai dengan kaidah dan standar. Soal yang telah dibuat harus ditelaah apakah memuat kompetensi esensial dalam pekerjaan dan apakah struktur soal terstandar dengan baik. Pada tahun 2010 serangkaian workshop item development secara nasional telah dilakukan pada profesi. Soal dari workhsop item development yang telah dikumpulkan sejumlah 222 soal yang memenuhi kriteria soal yang baik, dan setelah dilakukan workshop item review terkumpul soal 119 soal baik. Berikut adalah rekapitulasinya: NO KOMPONEN TARGET REALISASI 1. Jumlah soal yang direview dalam workshop 200 167 2. Jumlah soal yang memenuhi kriteria soal yang baik 200 119 3. Jumlah institusi yang mengirim peserta dalam 20 18 workshop 4. Jumlah peserta workshop 20 18 Workshop item review ini akan melibatkan para alumni peserta pelatihan item development dan item review 2010 karena dipandang mampu untuk melakukan review soal sebagai upaya peningkatan kualitas soal dan peningkatan sumber daya manusia. Dengan demikian maka soalsoal yang dihasilkan dapat dipergunakan dalam pelaksanaan uji kompetensi bidan. 2. Tujuan Tujuan dilaksanakannya workshop nasional item review ini adalah : Terkumpulnya 600 soal yang telah direview dan memenuhi syarat untuk digunakan sebagai ujian yang bersifat nasional
3. Output Workshop Output yang diharapkan dari workshop ini adalah : 600 soal yang telah direview yang memenuhi syarat untuk digunakan sebagai ujian yang bersifat nasional 4. Metode Pelaksanaan Workshop Workshop nasional item review bidan ini dilaksanakan pada tanggal 18 – 19 Juni 2011 di Hotel Ambhara, Jakarta. Peserta workshop adalah 23 item reviewer dan 4 orang fasilitator. Pada pelaksanaannya, ketua AIPKIND dan Yetty K Irawan/ Liasion Officer tidak dapat hadir karena sedang ada konfrensi ICM di Afrika. Sedang peserta Evi Hasnita dari Stikes For De Cock berhalangan hadir dan digantikan dengan Devi Sari dari Padang Mercubuana. Dan ada tambahan peserta yang tadinya menggantikan ibu Runjati yang akhirnya datang pada acara, yaitu ibu Sri Ratnawati dari Poltekkes Surabaya. Tut Barkinah dari IBI Banjarmasin digantikan oleh Bu Ani Kusumastuti dari
WORKSHOP KOMPONEN 2 – JUNI 2011
Page 2
HPEQ PROJECT 2011 WO Poltekkes III Jakarta Fasilitator Gita Nirmala datang terlambat dan di kelompok tersebut dikoordinir sementara oleh peserta, Ibu Yulinda. Untuk mempermudah proses review soal, para item reviewer dibagi menjadi 4 kelompok. Fasilitator pada workshop ini adalah Ibu Dewi Purwaningsih, Ibu Diana, dan Ibu Tati Rostati dan Ibu Gita Nirmala. Berikut adalah data peserta item review bidan: No Nama Jabatan dan Institusi HP email
1
Yulinda
2
4 5
Utinsari Ni Nyoman Budiani JM Meta Jehanara
6
Siti Mardiyah
7
Willa Follona
Jur. Kebidanan Poltekkes Bandung Poltekkes Pontianak Poltekkes Denpasar Bali Poltekkes Pekan Baru Poltekkes Jakarta III Akbid Minasa Upa Makassar PP IBI Jakarta
8
Kasiati
Poltekkes Surabaya
08123095650
Akbid Bandung
089655450766
[email protected]
Poltekkes Jakarta III Akbid Budi Kemuliaan Poltekkes Semarang Poltekkes Solo Jur. Kebidanan UB Poltekkes Jambi
08158862625 0818710150 08179542019 08156734507 0811 3030 31 08127419484
[email protected] [email protected] [email protected] [email protected] [email protected]
STIKes Kharisma
081319400463
3
9 10 11 12 13 14 15 16 17 18 19 20
Marliana rahma Karningsih Tuti Sukaeti Runjati Emi Suryani Tri Novi Erlina Nikelas Dewi Purnamawati Nuryaqin Sadjabibi Heny Puji w Sri Ratnawati
Poltekkes Makassar UNAIR Poltekkes Jogyakarta Poltekkes Surabaya
21
Ani Kusumastuti
Poltekkes III/IBI Jakarta
22
Lisma Evareny
Prodi Kebidanan Bukit Tinggi Poltekkes Padang
23
Dewi Purwaningsih
24 25 26
Tati Rostati Gita Nirmala Diana Hartati
Liassion Officer/Kebid.Poltekk es Bandung AIPKIND Bandung PP IBI Jakarta PP IBI Jakarta
WORKSHOP KOMPONEN 2 – JUNI 2011
081322257350
[email protected]
081522570519
[email protected]
08563737097
[email protected]
0812 73465657 08170851496
[email protected] [email protected]
0181442998
[email protected]
081315266646
[email protected] jurkeb.poltekesdepkessby@gm ail.com
085299218562 0813 2046 120 08122762095 08155080585
[email protected] dan
[email protected] [email protected] [email protected] [email protected] [email protected]
082116038327
[email protected]
0815 6145 817
[email protected]
08122324314 08158722324 081395451525
[email protected] [email protected] [email protected]
Page 3
HPEQ PROJECT 2011 WO
Apabila dibandingkan dengan rencana kegiatan yang tertera pada TOR, pada implementasinya, acara berjalan agak terlambat dari jadwal dikarenakan waktu mulainya acara sedikit terlambat sekitar 30 menit karena harus menunggu peserta yang terlambat hadir, tetapi meskipun demikian tidak berdampak pada waktu pelaksanaan tiap sesi dari waktu yang dijadwalkan sebelumnya. Meskipun demikian, nilai substansi dari tiap materi yang diberikan oleh narasumber tidak berkurang. Berikut adalah rundown acara workshop pada kondisi riil : Waktu 10.30 - 10.40
Sabtu, 18 Juni 2011 Acara Pembukaan dan Pengarahan
10.40 - 11.15 11.15 – 12.00 12.00 – 13.00 13.00 – 17.00 17.00 – 19.00 19.00 – 22.00
Penjelasan Blueprint Bidan Revisi Penjelasan dan pengarahan materi item review ISHOMA Diskusi dan review soal dibagi menjadi 4 kelompok ISHOMA Diskusi dan review soal dibagi menjadi 4 kelompok
Waktu 08.00 - 12.00 12.00 - 13.00 13.00 – 15.00 15.00 - 15.50 15.50 – 16.00
Pelaksana Tati Rostati/ Sekertaris AIPKIND Dewi Purwaningsih Narasumber: Dewi Masyitah Panitia Fasilitator Panitia Fasilitator
Minggu, 19 Juni 2011 Acara Pelaksana/Fasilitator Lanjutan Diskusi dan review soal dibagi menjadi 4 Fasilitator kelompok ISHOMA Panitia Lanjutan Diskusi dan review soal dibagi menjadi 4 Fasilitator kelompok Rekapitulasi hasil soal yang telah direview Dewi Purwaningsih/ LO Profesi Bidan Komponen 2 Wrap up dan Rencana Tindak lanjut Dewi Purwaningsih/ LO Profesi Bidan Komponen 2
5. Hasil Kegiatan Workshop ini diawali pengarahan dari sekertaris AIPKIND dan Liasion Officer Bidan HPEQ mengenai hal-hal yang akan dikerjakan selama workshop beserta penentuan target yang akan dicapai. Soal yang akan direview adalah hasil dari pertemuan item development tanggal 11-12 Juni 2011, sejumlah 434 soal dan penambahan kiriman susulan sebanyak 50, sehingga total soal 484. Sedang total soal yang akan direview pada pertemuan ini adalah sebanyak 600 soal. 484 dari soal yang dihasilkan tahun ini dan sisanya adalah soal stock dari tahun 2010. Masing-masing kelompok, reviewer didampingi fasilitator akan mereview soal sebanyak 150 soal.
Setelah pengarahan tujuan dan output pertemuan, pemaparan dan sosialisasi blue print dan hasil kesepakatannya oleh LO komponen 2 bidan, meskipun sebagian peserta adalah peserta lama, namun untuk blueprint yang baru ini perlu terus disosilisasikan. Selanjutnya reviewer diberikan materi mengenai item development dan item review oleh narasumber dari UKDI, Dewi Masyitah.
WORKSHOP KOMPONEN 2 – JUNI 2011
Page 4
HPEQ PROJECT 2011 WO Pada tahap review soal, narasumber mengingatkan kembali agar dalam mereview soal para peserta melihat esensi dan relevansi dari soal dengan mengacu pada standar kompetensi Bidan, mengikuti ketujuh tinjauan yang telah disepakati dalam blue print dan juga memperhatikan struktur soal. Koding soal yang disepakati: nama institusi_kelompok/ nomor soal dan jika soal ditolak maka tulisan diberi warna merah, jika diterima dengan warna biru. Berdasarkan hasil pertemuan yang telah dilaksanakan selama 2 hari, output dari pertemuan item review bidan secara kelompol adalah sebagai berikut: Kelompok 1 No. 1. 2. 3. 4. 5.
KOMPONEN Jumlah soal yang direview Jumlah soal yang diterima (memenuhi kriteria soal yang baik) Jumlah soal yang ditolak Jumlah peserta workshop Jumlah fasilitator
TARGET 150 150 0 1
REALISASI 55 35 20 7 1
Kelompok 2 No. 1. 2. 3. 4. 5.
KOMPONEN Jumlah soal yang direview Jumlah soal yang diterima (memenuhi kriteria soal yang baik) Jumlah soal yang ditolak Jumlah peserta workshop Jumlah fasilitator
TARGET 150 150 0 1
REALISASI 60 56 4 6 1
Kelompok 3 No. KOMPONEN 1. Jumlah soal yang direview 2. Jumlah soal yang diterima (memenuhi kriteria soal yang baik) 3. Jumlah soal yang ditolak 4. Jumlah peserta workshop 5. Jumlah fasilitator Ditambah dengan 10 soal baru dari reviewer Kelompok 4
TARGET 150 150 0
No. 1. 2. 3. 4. 5.
TARGET 150 150 0
KOMPONEN Jumlah soal yang direview Jumlah soal yang diterima (memenuhi kriteria soal yang baik) Jumlah soal yang ditolak Jumlah peserta workshop Jumlah fasilitator
WORKSHOP KOMPONEN 2 – JUNI 2011
1
1
REALISASI 60 38 12 6 -
REALISASI 79 46 33 5 1
Page 5
HPEQ PROJECT 2011 WO Berdasarkan hasil rekapitulasi di atas output workshop secara umum, dapat disimpulkan bahwa pencapaian target workshop ini sudah optimal. Berikut adalah hasil keseluruhan: No. 1. 2.
3. 4. 5.
KOMPONEN Jumlah soal yang direview Jumlah soal yang diterima (memenuhi kriteria soal yang baik)
TARGET 1000 600
Jumlah soal yang ditolak Jumlah peserta workshop Jumlah fasilitator
0 23 4
REALISASI 254 175 (+10 soal baru) = 185 69 24 3
Berikut adalah tabel target dan pencapaian komponen output pelaksanaan kegiatan secara keseluruhan:
Beberapa faktor mendukung tercapainya target review soal 1. Narasumber dan fasilitator yang sudah memahami materi dengan baik 2. Peserta adalah peserta yang sudah pernah mengikuti item review pada tahun lalu 3. Hanya saja dari hasil yang tercapai, soal paling banyak terkumpul pada area kompetensi 4 dan 5, sehingga masih belum merata Soal-soal yang telah direview akan dimasukkan ke dalam item bank nasional untuk kemudian dilakukan item analysis untuk mendapatkan 200 soal ujian untuk uji kompetensi bulan September 2011. Berdasarkan analisa tim monev, pencapaian target jumlah reviewer yang hadir, jumlah soal yang tereview sudah mendekati target yang disepakati bersama. Berdasarkan kesepakatan tersebut, sebaiknya masing-masing peserta dapat menyusun plan of action yang strategis untuk memperbaiki kinerja masing-masing wilayah dalam hal implementasi
WORKSHOP KOMPONEN 2 – JUNI 2011
Page 6
HPEQ PROJECT 2011 WO mekanisme item development & review yang pada akhirnya berkontribusi pada peningkatan kualitas uji kompetensi bidan dan lulusannya.
6. Refleksi Setelah dilakukan analisa hasil kegiatan, selanjutnya perlu dilakukan refleksi sebagai bentuk evaluasi pelaksanaan workshop ditinjau dari perspektif peserta, fasilitator, dan tim monev secara umum. Melalui refleksi ini diharapkan akan teridentifikasi root of causes dari kinerja wilayah yang kurang optimal dalam workshop ini. Berikut adalah refleksi pelaksanaan workshop dari beberapa perspektif tersebut :
Gambaran Umum Secara umum kegiatan berlangsung dengan efektif. Hanya saja peserta merasa diburu-buru karena mengejar target. Variasi soal Beberapa hal yang perlu diimprove dari pelaksanaan workshop ini adalah : - Pemenuhan soal yang merata untuk paket soal ujian sesuai bluprint - Soal yang ada kurang variatif dan tidak memenuhi paket soal untuk blurprint Fasilitator Secara umum kemampuan peserta cukup baik. Kendala yang dihadapi (dari sisi peserta): - Persamaan persepsi dan tata bahasa - Soal yang tidak relevan dengan standar kompetensi - Persepsi soal dan tidak mewakili seluruh elemen kompetensi/ blueprint, terfokus pada keterampilan klinis bidan dan landasan ilmiah bidan - Tidak semua soal menggunakan referensi - Ketidaksesuaian antar vignet dengan option - Option jawaban hanya 4 - Terminologi yang digunakan tidak lazim/ terminologi lokal - Vignette tidak sistematis/ pakem tidak lengkap - Semua soal yang diterima melalui proses perbaikan baik vignette maupun option Rekomendasi: - Sering berlatih di institusi masing-masing sehingga lebih lancar dalam mereview dan orang/ peserta yang hadir/ ikut dalam workhsop tidak diganti - Banyak melakukan item review dan melaksanakan try out - Strategi harus dimodifikasi - Kelompok dibagi menjadi 7 kelompok sesuai dengan area kompetensi - Dalam penyusunan soal (item development) blueprint digunakan sesuai dengan standar kompetensi - Pembuat soal dan reviewer diberikan kepada peserta sesuai dengan penguasaan materi Peserta Kendala yang dihadapi: - Terjadi kejenuhan karena terburu-buru harus selesai dalam waktu dekat - Perbedaan persepsi dalam review - Pengadaan buku sumber terbatas
WORKSHOP KOMPONEN 2 – JUNI 2011
Page 7
HPEQ PROJECT 2011 WO -
Jenis soal yang ada tidak/ perlu dikelompokkan sesuai blueprint Variasi vignet dan option pada tiap soal Tinjauan blueprint tidak diterapkan seluruhnya (distribusinya tidak merata pada beberapa tinjauan) Keseragaman dalam menulis vignet Kejelasan blueprint sebagai acuan dalam mereview soal masih kurang Penggunaan buku sumber utama sebagai acuan dan mereview soal tidak sama Variasi dan dinamika pembuat soal yang belum semua sesuai kaidah pembuatan soal yang baik dan aspek blueprint Menguasai materi secara luas dan mendalam dari seluruh kompetensi bidan Soal yang direview banyak yang diganti/ diperbaiki Kelompok terlalu besar sehingga diskusi terlalu lama karena banyak pemikiran
Tim Monev : Feedback Peserta Feedback form didistribusikan oleh tim monev kepada seluruh peserta untuk menjaring “voice of customer” peserta terkait satisfaction level terhadap aspek-aspek pelaksanaan workshop. Dari 23 kuesioner yang kembali ke tim monev, 85% responden menyatakan pelaksanaan workshop sangat memuaskan. Pencapaian yang sangat positif ini merupakan kontribusi dari berbagai pihak, terutama fasilitator, fasilitas workshop, dan pelayanan panitia.
Analisa lebih lanjut terhadap feedback peserta, kepuasan terbesar peserta dirasakan terhadap output workshop, dimana peserta merasa mendapatkan added value yang besar, sehingga workshop ini dinilai dapat meningkatkan kemampuan mereka dalam membuat soal yang baik.
WORKSHOP KOMPONEN 2 – JUNI 2011
Page 8
HPEQ PROJECT 2011 WO
7. Rencana Tindak Lanjut Berdasarkan analisa output kegiatan, evaluasi pelaksanaan workshop, refleksi dan feedback dari peserta workshop beberapa hal yang dapat direkomendasikan sebagai bentuk improvement dan rencana tidak lanjut untuk menjaga sustainability output dan outcome dari workshop ini adalah sebagai berikut : -
Pada pelaksanaan item development berikutnya sebaiknya peserta sudah diarahkan untuk membuat soal tertentu agar terpenuhi soal paket ujian sesuai blueprint Mereview bersama tim di institusi untuk soal yang ada sebagai bentuk latihan sehingga dapat dijadikan soal yang berkualitas
8. Penutup Persiapan implementasi uji kompetensi untuk profesi Bidan diharapkan dapat diupayakan dengan peningkatan kualitas dan kuantitas pembuatan soal. Dengan demikian, upaya percepatan pembuatan soal yang berkualitas ini dapat berjalan dengan baik dan memiliki dampak yang lebih bermakna. Selain itu proses implementasi CBT akan dapat berjalan sesuai dengan yang telah direncanakan.
WORKSHOP KOMPONEN 2 – JUNI 2011
Page 9