02/10/2012
Pola Laporan Manejemen ujian
• persiapan • pelaksanaan • Hasil
Manejemen soal
• persiapan • Pelaksanaan • Hasil
1
02/10/2012
Manajemen Ujian • • • • • •
Pemberitahuan Pendaftaran Penerimaan pendaftaran Permasalahan Solusi Rekomendasi
Pelaksanaan
• • • • • •
Melakukan kompilasi data pendaftar Verifikasi data Validasi ??? Permasalahan Solusi Rekomendasi
Hasil
• • • • •
Institusi pendaftar Jumlah peserta Permasalahan solusi Rekomendasi
Persiapan
Pra Ujian- Peserta No
Registrasi
Sasaran
Realisasi
Keterangan
1
Jumlah institusi teregistrasi
120
90
1. 2.
2
Jumlah peserta teregistrasi
1730
1449
Ada beberapa data tidak sesuai dengan format
3
Jumlah peserta terverifikasi
1449
14 49
4
Jumlah peserta tervalidasi
5
Target waktu
concern kurang Informasi tidak sampai
Tidak dapat dilakukan karena waktu sempit
- registrasi
1 bulan
1 bulan 2 minggu
- verifikasi
7 hari
7 hari
Libur lebaran
- validasi
-
-
Tidak dpt dilakukan
- Penetapan peserta final
H-14
H-5
bentuk data sangat beragam
2
02/10/2012
Permasalahan dalam Registrasi dan Solusi No Masalah 1
Solusi
Petunjuk/pedoman /format pendaftaran yang di kirim ke institusi/regional tidak lengkap Format yang di gunakan sebagai pendaftaran tidak sesuai dengan format yang ada pada aplikasi
2
Waktu pendaftaran ke regional dan dari regional ke pusat tidak di tepati, karena berbagai hal, terutama libur ramadhan dan lebaran.
• Petunjuk/pedoman pendaftaran disusun/dirumuskan secara komprehensif , baru kemudian di kirim/di email ke regional. • Pengiriman petunjuk/pedoman pendaftaran hanya satu sumber • Format yang di kirim sama dengan data yg sesuai dengan aplikasi Tanggal pendaftaran ke regional dan dari regional ke pusat hendaknya di tepati. Pendaftaran di luar jadwal tersebut, dinyatakan tidak diterima.
Permasalahan dalam Registrasi dan Solusi N Masalah o
Solusi
3
Panitia pusat masih menerima kiriman data via email dari institusi-institusi di masing-masing regional, tidak melalui sub regional atau double.
Institusi hanya boleh mengirimkan data ke regional/sub regional. Panitia pusat tidak menerima data dari institusi, tetapi dari regional/sub regional.
4
Masih ada pengiriman data pendaftar yang belum/tidak sesuai dengan format yang disediakan, termasuk file foto dan format foto (jpeg: 600x800 fixel)
• Berikan petunjuk pengisian data ke dalam format pendaftaran, termasuk cara melakukan edit foto agar sesuai dengan yang diinginkan (jpeg: 600x800 fixel) • Kembalikan data pendaftar, jika ada yang tidak sesuai dengan format dan ketentuan yang diinginkan. • Pada tiap kolom yang ada dalam form pendaftaran peserta di beri “insert comment” • Data yang di kirim ke pusat adalah data “ bersih “ dari regional
3
02/10/2012
Permasalahan dalam Registrasi dan Solusi No Masalah
Solusi
5
Pemakaian email pribadi menyulitkan identifikasi data, mengingat email TO yang masuk akan tercampur email lainnya
Perlu dibuat email tersendiri yang khusus di buat untuk keperluan pendaftaran TO
6
Format pendaftaran berubahubah
Format dikembangkan oleh tim IT dan didesign sedemikian rupa sehingga pengetikan data (termasuk hurup besar/kecil) hanya akan terbaca sesuai yang diinginkan.
7
Respon institusi pengirim peserta try out sangat lamban
Perlu sosialisasi yang lebih intensif melalui jejaring AIPNI dan organisasi profesi PPNI dan MTKP masingmasing daerah
Pelajaran yang dapat dipetik 0 Pentingnya koordinasi antara regional dan sub
regional serta panitia pusat dalam proses registrasi, verifikasi dan validasi 0 Pentingnya melibatkan MTKP dan PPNI propinsi serta AIPNI regional dalam proses tryout 0 Perlu disusun lebih teknis SOP registrasi, verifikasi dan validasi 0 Sistem registrasi dilakukan secara on line.
4
02/10/2012
Registrasi, Verifikasi, dan Validasi 1. 2. 3. 4. 5. 6. 7. 8. 9.
Pemberitahuan registrasi kepada seluruh institusi peserta dilakukan 3 bulan sebelum hari H (format data peserta dilampirkan). Registrasi dilakukan oleh AIPNI regional (AIPNI regional akan disesuaikan dengan MTKP regional). Registrasi di AIPNI regional dilakukan 2 minggu setelah pemberitahuan registrasi. Masing-masing regional mengirim data jumlah peserta dan institusi pengirim (sesuai format yang berlaku [format sedang dibuat]). AIPNI regional melakukan kompilasi dan verifikasi data peserta dari seluruh institusi regional. AIPNI regional melakukan validasi ke institusi pengirim peserta, sehingga data menjadi sangat valid dan pasti tidak berubah lagi. Data peserta yang telah sangat valid dari seluruh regional dikirim ke ke Panitia Pusat. Proses dari no 4 s.d. 7 diselesaikan dalam waktu 2 minggu. Bagi peserta yang terlambat mendaftar dalam periode ini, akan dimasukan dalam periode selanjutnya.
5
02/10/2012
Verifikasi 1. 2.
3. 4. 5.
Verifikasi dilakukan oleh pengelola regional dengan memastikan kesesuaian data antara lain nama institusi, jumlah peserta, dan kelengkapan data lainnya (sesuai format). Jika terdapat data yang kurang/tidak sesuai agar langsung di sampaikan kepada institusi pengirim. Institusi pengirim diminta untuk merevisi dan melengkapi data-data yang tidak sesuai atau menambahkan data, untuk selanjutnya dikembalikan ke pengelola regional. Setelah data dilengkapi dan dinyatakan benar dan sesuai oleh institusi pengirim, data tersebut di kirim kembali ke pengelola regional. Pengelola regional memverifikasi ulang
Validasi Peserta 0 Setelah verifikasi data, proses validasi dilakukan oleh
penanggung jawab regional dibantu sub regional.
0 Data yang sudah diverifikasi dibuat dalam 2 bentuk data: 0 1 data per institusi yang akan divalidasi oleh pimpinan institusi dan regional dibantu sub regional 0 1 data rekapitulasi yang akan divalidasi oleh regional dan MTKP lingkup regional bersangkutan 0 Validasi ini dibuat dalam bentuk berita acara yang ditanda tangani stake holder yang bersangkutan 0 Data hasil validasi dikirim ke penanggung jawab pusat. 0 Waktu validasi maksimal 6 hari kerja
6
02/10/2012
Bank Soal Nasional ITEM WRITER (?)
LOCAL ITEM BANK ADMINIST.
REGIONAL ITEM BANK ADM.
NATIONAL ITEM REVIEW
ITEM BANK – 2 (?)
PANEL EXPERT
NATIONAL ITEM BANK ADM.
ITEM BANK1 (?)
Try Out
ITEM BANK – 3 (?)
IBA: Ibu Tuti Herawati
ITEM SELECTION PROCESS
QUESTION BOOK
ITEM BANK – 4
7
02/10/2012
Workshop Kegiatan
Item dev
2010
2011
2012
Fre k
Inst
soal
Fre Institusi k
soal
Frek
Inst
Soal
4
Pddk Prof
360
3
970
3
64 (S1) 111 Writer
1621
<<<*
17
614
3
44 (S1/PPNI) 102 Reviewer
1426*
-
-
-
475
-
-
-
597
2
Pddkn, ppni (kolegium) 39 inst/59 expert
1160*
idev/rev mandiri
50 Pddk S1 Ppni (praktisi & poltekes)
2
Item Review
1
iba
150
2
32 pddk ppni
-
-
1
26 pddk ppni
Iba + item rev -
-
1
Panel expert
-
2
-
Pddk Prof
Pddkn, ppni (kolegium)
<<<*
Item Development N Masalah O
Analisa
1 Jumlah Item - Kualitas item writer ? writer dan Kriteria sudah ada , apakah soal meningkat, saat penunjukkan oleh manajemen institusi sudah di penuhi soal lebih baik atau atas dasar pemerataan? namun - Pemahaman tentang mengapa kompetensi ners dan blue jumlah soal print? baik tidak - waktu pelatihan terlalu berbeda singkat untuk seseorang dengan TO membuat soal yg baik? sebelumnya - Saat ini fase capacity building?
Rekomendasi AIPNI : 1. Memberikan perhatian khusus pada pembinaan dan pengembangan metode ujian 2. Mengakselerasi terbentuknya unit assessmen di institusi 3. Meningkatkan upaya untuk pelaksanaan pelatihan item dev institusi
8
02/10/2012
Lanjut.. - Ketersediaan referensi? Apakah ada referensi yang sama untuk semua institusi ? - Pemahaman yang sama antar item writer terkait content? - Proses pembelajaran di institusi yang belum sama dg metode ujian
4.Mengembangkan kelompok peminatan antara institusi MTKI : mempercepat dan memperluas kemampuan item dev PPNI : menetapkan satu pola dalam pengembangan item (LPUK)
Item Development Masalah
Analisa
2. Terdapat peningkatan workshop mandiri tetapi produktifitas soal saat mandiri masih belum banyak di terima nasional
1. Pengelolaan regional? Pengakuan? 2. Reward/punishment? 3. Keragaman peserta? 4. Komitmen item writer saat pelatihan? 5. Bagaimana dengan pengembangan institusi? 6. Apakah item dev baru sebatas workshop? 7. Implementasi?
Rekomendasi AIPNI : 1. Menyepakati terbentuknya unit assessment di institusi 2. Menyepakati model ujian institusi dg model LPUK 3. Pengembangan model reward dalam pengembangan soal
9
02/10/2012
3 Kurang bervariasi Soal terkait core competency dan kurang memenuhi blue print
1. Permintaan soal yang di bawa belum sesuai dengan blue print 2. Soal yang di bawa peserta sesuai dg template 3. Soal yang di bawa banyak yang sama 4. Peserta baru sedang mau belajar menuylis soal
Item Review Masalah Analisa Solusi Soal yang terkumpul 1. Soal terkumpul saat 1. Saat Item dev soal telah tidak proporsional idev atau irev bervariasi dengan dg blue print, kurang quantity oriented? permintaan soal sesuai variasi 2. Kurangnya blue print pemahaman 2. Item dev dengan membuat soal permintaan sesuai dengan blue print? 3. Kemampuan penulis soal tuk menulis soal sel tertentu terbatas?
10
02/10/2012
Masalah
analisa
Solusi
Reviewer masih Latihan sebagai Banyak latihan perlu banyak reviewer kurang latihan Belum banyak pilihan Fasilitas/support proses review belum maksimal (komputer, It)
Harus menggunakan fasilitas panitia namun tidak tersedia
perlu penyediaan fasilitas yang cukup
Item Review Masalah Analisa Penulis soal belum Belum ada sistem yg bisa dapat feedback memberikan feedback ke dari soal yang di item writer buatnya
Soal baik masih sedikit (kurang dari 50 %) Soal masih banyak di anggap sulit oleh peserta Daya beda masih sangat rendah bahkan kurang dari
Rekomendasi IBA regional mengembalikan soal ke penulis soal sesuai dengan feedback. Pengembangan program aplikasi IBA yang dapat mengidentifikasi penulis soal
1. Pemilihan reviewer belum terseleksi dengan baik, pemahaman reviewer ttg kompetensi belum sama (esensial), 2. Pemilihan reviewer masih berfokus pd distribusi institusi belum kualitas reviewer.
11
02/10/2012
Rekapitulasi Item Review 2012 irev 1
irev 2
irev 3
target
realisasi
target
realisasi
target
realisasi
Reviewer
36
35
36
36
40
39
institusi jumlah soal terreview
28
28
27
25
30
30
1000
855*
1000
767*
1000
763*
jumlah soal baik
600
433
600
434
600
487
Total soal terreview: 2385*; Soal baik: 1354 hpeq 2012\item review I_9_10juli2012\REKAP TINJAUAN HASIL REVIEW.xlsx
Panel Expert 2012 0 Dilakukan 2 kali dengan melibat 39 institusi
(pendidikan ners, PPNI, Kolegium) dengan meilbatkan 59 expert. 0 Menghasilkan 1160 soal Masalah Variasi soal
Analisa
Rekomendasi
Fokus pada target jumlah soal, ketersediaan variasi soal terbatas, waktu dan referensi terbatas
rekap laporan manajemen soal.xlsb
12
02/10/2012
EVALUASI METODA UJIAN NO. KEGIATAN
TARGET
REALISASI
1.
METODE UJIAN
SEMUA KEGIATAN TO SEMUA KEGIATAN TO UKNI UKNI MENGGUNAKAN MENGGUNAKAN METODE CBT METODE CBT
2.
LOKASI UJIAN
MENGGUNAKAN 17 LOKASI UJIAN
MENGGUNAKAN 17 LOKASI UJIAN
KETERANGAN
MENGGUNAKAN CBT CENTER KEDOKTERAN
13
02/10/2012
A. EVALUASI – PRA UJIAN
No Kegiatan
Target
Realisasi
1. KESIAPAN CBT
Semua CBT Center yang digunakan memenuhi jumlah workstation dan jarak Workstation sesuai dengan ketentuan.
Walaupun semua workstation pada CBT center sudah memenuhi ketentuan tetapi ada beberapa CBT center mempunyai jawak WS yang terlalu padat
Jarak workstation belum memenuhi standar
Pelunya format evaluasi dan saran dari PP ke koordinator CBT
2. RUANG BRIEFING
Semua ruang briefing pada CBT yang digunakan memadai disertai fasilitas penunjang seperti LCD dan Pengeras suara
Belum semua ruang briefing di CBT Center sudah siap digunakan sesuai waktunya pada H-1 (Waktu telat digunakan untuk persiapan ruangan terlebih dahulu)
Keberadaan fasilitas penunjang ruang briefing belum memenuhi standar
Perlunya ada panitia lokal ners yang membantu dalam persiapan ujian di CBT Center Kedokteran
No Kegiatan 3. FASILITAS
Target
Fasilitas PENUNJANG Penunjang yang digunakan seperti AC, Loker, Ruang Karantina memadai serta rambu-rambu sudah terpasang pada H-1
Masalah
Solusi
Realisasi
Masalah
Solusi
Ada beberapa CBT Center yang fasilitas penunjang belum siap digunakan pada H_1 keberadaan wc kotor, ramburambu penunjuk ruang CBT belum terpasang, serta pengumuman pembagian ruangan dan workstation belum terpasang pada H-1
Keberadaan fasilitas penunjang ujian belum terpenuhi sesuai ketentuan/sta ndar
Perlunya ada panitia lokal ners yang membantu dalam persiapan ujian di CBT Center Kedokteran
14
02/10/2012
B. PERSIAPAN UJIAN : BRIEFING PENGAWAS PUSAT
No 1
Kegiatan Kehadiran
Target
Realisasi
Semua PP dapat hadir PP Terlambat 1 orang tepat waktu
2. Workshop PP Semua PP mendapatkan pemahaman yang sama terhadap proses pelaksanaan TO CBT
Ada beberapa PP pada saat pelaksanaan ujian tidak mematuhi petunjuk pelaksanaan ujian.
3
Ada beberapa PP yang melaksanakan tugasnya tidak sesuai ketentuan. contoh: segel, briefing pengawas lokal dan peserta,
Pemahaman Seluruh PP memahamai Tupoksi PP ketentuan-ketentuan dalam proses pelaksanaan TO UKNI CBT
B. PERSIAPAN UJIAN : BRIEFING PENGAWAS PUSAT
No
Kegiatan Pembagian 4. perangkat ujian 5. Pengecekan perangkat ujian
Target Semua PP mendapatkan perangkat ujian yang lengkap PP melakukan pengecekan kelengkapan perangkat ujian
6.
Semua PP mendapatkan Semua PP tidak mendapatkan penjelasan tentang proses penjelasan pengembalian pengembalian perangkat perangkat ujian ujian termasuk checklist kelengkapan pengembalian perangkat ujian
Penjelasan pengembalia n perangkat ujian
Realisasi PP hanya menandatangani penerimaan perangkat ujian PP secara individu melakukan pengecekan perangat ujian
15
02/10/2012
NO
MASALAH DAN SOLUSI BRIEFING PENGAWAS PUSAT MASALAH
SOLUSI
1.
Adanya kehadiran pengawas pusat Pada saat briefing belum tepat Waktu
2.
TOR workshop PP belum terstandar Perlu adanya SOP materi Materi workshop yang diperoleh workshop PP. PP belum terstandar dan belum Perlu SOP tentang materi sesuai tahapan-tahapan ujian briefing PP ke pengawas lokal Perlu SOP tentang materi briefing PP ke peserta
3.
Belum ada standar evaluasi pemahaman tupoksi PP
Dibuatkan standar baku toleransi keterlambatan pengawas pusat
Dilakukan evaluasi tentang Tupoksi PP
MASALAH DAN SOLUSI BRIEFING PENGAWAS PUSAT NO
MASALAH
SOLUSI
4.
Belum ada berita acara penerimaan perangkat ujian dari penanggung jawab pembawa perangkat ujian ke PP.
Dibuatkan berita acara serah terima perangkat ujian.
5.
Belum adanya check list kelengkapan perangkat ujian
Dibuatkan lembar chek list kelengkapan perangkat ujian
6.
Pengembalian perangkat ujian tidak sesuai ketentuan
Perlunya penjelasan dan Sosialisasi PP tentang pengembalian perangkat ujian
16
02/10/2012
PELAKSANAAN UJIAN H -1 BRIEFING PESERTA
No.
Kegiatan
Target Waktu pelaksanaan briefing dilaksanakan tepat waktu sesuai koordinasi di awal
Realisasi
1.
Waktu pelaksanaan
Semua kegiatan briefing dilakukan pada H-1 tetapi Ada beberapa CBT Waktu pelaksanaan briefing terlambat dilaksanakan terkait dengan kehadiran peserta terlambat
2.
Materi Briefing Materi briefing dengan Ada pengawas pusat yang dengan peserta peserta dari pengawas belum menjelaskan aplikasi pusat seragam dengan CBT pada H-1 pada peserta media yang seragam
PELAKSANAAN UJIAN H-1 BRIEFING PESERTA
No.
Kegiatan
Target
3.
Pengecekan Lokasi Ujian
Semua peserta di semua CBT sudah mengetahui lokasi ujiannya dan melakukan pengecekan lokasi/ruangan ujian
4.
Distribusi kartu Pada H-1 Semua kartu peserta peserta dapat terdistribusi sesuai ketentuan
Realisasi Belum semua peserta mengetahui pembagian ruangan ujian dan melakukan pengecekan lokasi ujian pada H-1 dikarenakan ada beberapa CBT center belum membagi dan memasang rambu-rambu atau penunjuk pada H-1 Tidak semua kartu peserta terdistribusi pada H-1 karena beberapa peserta di beberapa CBT tidak membawa identitas berfoto
17
02/10/2012
PELAKSANAAN UJIAN H_1 BRIEFING PESERTA
No.
Kegiatan
Target
Realisasi
5.
Laporan pelaksanaan (H-1) di Lokasi Ujian
Semua pengawas pusat melaporkan kegiatan (H-1) di lokasi ujian secara lengkap sesuai format yang disediakan
Semua pengawas pusat membuat laporan pelaksanaan (H-1) di Lokasi Ujian sudah sesuai format
MASALAH DAN SOLUSI - BRIEFING PESERTA NO
MASALAH
SOLUSI
1. Keterlambatan waktu briefing dengan peserta dan pengawas lokal
Perlunya standar baku toleransi keterlambatan peserta dan pengawas lokal
2.
Belum seragamnya pemberian materi briefing oleh pengawas pusat kepada peserta dan pengawas lokal
Dibuatkan daftar cheklist materi briefing pengawas pusat dengan peserta serta materi briefing dengan pengawas lokal
3.
Belum semua kartu peserta terdistribusi pada H-1 karena belum semua peserta membawa id card berfoto
Perlunya standar baku
18
02/10/2012
MASALAH DAN SOLUSI - BRIEFING PESERTA NO
4.
MASALAH
Pengecekan lokasi ujian oleh peserta belum dilakukan sesuai standar (H-1)
SOLUSI
Perlunya panitia lokal baik tim admin atau IT dari ners untuk membantu persiapan ujian spt memasang rambu-rambu, memasang pengumuman pembagian ruangan serta pengecekan workstation
C. PELAKSANAAN UJIAN
No 1
Kegiatan Pembukaan berkas ujian
2. Pembagian
Target
Realisasi
Pembukaan berkas ujian Ada CBT center pembukaan dilaksanakan sesuai ketentuan berkas ujian tidak disaksikan oleh koordinator CBTnya berhubung sedang adanya kegiatan
nomor login peserta
Pembagian nomor login peserta dilakukan berdasarkan urutan peserta
Pembagian nomor login kepada pengawas lokal mengalami kesulitan karena disusun tidak berdasarkan nomor urut peserta
Waktu pelaksanaan ujian
Waktu pelaksanaan ujian dilakukan secara serentak di seluruh CBT
Waktu pelaksanaan ujian di beberapa CBT dilaksanakan terlambat dikarenakan adanya kendala diprogram komputer seperti di UNJANI dan UMM
3
19
02/10/2012
No 4.
Kegiatan Pengisian Berita Acara Pelaksaaan Ujian
Target
Realisasi
Pengisian berita acara pelaksanaan ujian dilaporkan secara lengkap dan detil sesuai format
Belum semua pengawas pusat mengisi berita acara pelaksanaan ujian secara detil dan lengkap.
5. Penyegelan tas Melakukan penyegelan tas soal
6.
soal sesuai ketentuan
Pengembalian Pengembalian berkas ujian Berkas Ujian sesuai dengan ketentuan
Ada beberapa pengawas pusat melakukan penyegelan tas kurang benar. Belum semua pengawas pusat mengembaikan berkas/barang sesuai dengan ketentuan: seperti hard disk demo, daftar absensi, informasi login
MASALAH DAN SOLUSI – PELAKSANAAN UJIAN NO
MASALAH
SOLUSI
1.
Pembukaan berkas ujian belum sesuai ketentuan dihadiri oleh koordinator CBT
Perlunya panitia lokal ners untuk persiapan menjadi koordinator CBT –Ners ATAU Perlunya surat pernyataan kesiapan membantu penyelenggaraan ujian ners
2.
Waktu yang diperlukan dalam pembagian nomor login peserta kurang efisien
Petugas admin persiapan ujian perlu menyusun informasi login sesuai nomor urut peserta
20
02/10/2012
MASALAH DAN SOLUSI – PELAKSANAAN UJIAN NO
MASALAH
3.
Penyegelan tas tidak memenuhi ketentuan
4.
Pengembalian berkas/barang belum sesuai tas/tempat yang seharusnya
SOLUSI
Perlunya materi penyegalan yang benar saat briefing PP Perlunya penjelasan saat briefing pada PP serta perlu adanya tanda pengenal masing-masing berkas yang sesuai dengan tempat nya.
RENCANA TINDAK LANJUT 1.
2.
PERLUNYA SURAT PERNYATAAN KESIAPAN KOORDINATOR CBT, IT LOKAL MAUPUN TIM ADMIN CBT CENTER DALAM DALAM MEMBANTU PENYELENGGARAAN UJIAN NERS ATAU PERLUNYA DIBENTUK PANITIA LOKAL NERS YANG MEMBANTU PELAKSANAAN UJIAN DI FAKULTAS KEDOKTERAN BAIK SEBAGAI ADMINISTRASI MAUPUN IT LOKAL PERLUNYA STANDAR BAKU MATERI WORKSHOP PENGAWAS PUSAT A. MATERI SAAT BRIEFING DENGAN PESERTA B. MATERI SAAT BRIEFING DENGAN PENGAWAS LOKAL C. MATERI TENTANG CARA PENGISIAN BERITA ACARA UJIAN BAIK PERSIAPAN MAUPUN PELAKSANAAN UJIAN D. MATERI TENTANG CARA PENGECEKAN/PERSIAPAN WORKSTATION E. MATERI TENTANG PENGEMBALIAN BERKAS UJIAN
3. PERLUNYA PENAMBAHAN PANDUAN/SOP MELIPUTI : A. SOP PENGAMBILAN TAS SOAL OLEH PP DARI PENANGGUNG JAWAB TAS SOAL B. SOP CARA PENYEGELAN TAS SOAL OLEH PENGAWAS PUSAT
21
02/10/2012
Distribusi Peserta 2012 CBT: terdaftar 1449, hadir 1418 Regional 1 CBT
Institusi yg terlibat
Peserta terdaftar
Peserta Hadir
Peserta tidak hadir
UNSYIAH
3
61
59
2
USU
4
60
58
2
UNAND
3
55
47
8
UNBRAH
5
83
80
3
Regional 2 & 3 CBT
Institusi yg terlibat
Peserta terdafta r
Peserta Hadir
Peserta tidak hadir
YARSI
10
176
162
14
UNPAD
7
140
137
3
UNJANI
5
68
65
3
22
02/10/2012
Regional 4
CBT
Institusi yg terlibat
Peserta terdaftar
Peserta Hadir
Peserta tidak hadir
UMY
3
41
41
0
UGM
10
145
139
6
UNISSULA
6
88
87
1
UNDIP
3
45
44
1
Regional 5, 6 & 7 CBT
Institusi yg terlibat
Peserta terdaftar
Peserta Hadir
Peserta tidak hadir
UWKS
10
130
128
2
UMM
3
39
33
6
UB
3
75
73
2
UNUD
4
103
102
1
UNLAM
5
75
73
2
UNHAS
6
94
91
3
Distribusi institusi peserta TO CBT: terdaftar 1449, hadir 1418 2011
2012
Regional 1
7
15
Regional 2
6 (13)
5
Regional 3
9 (22)
16
Regional 4
13
22
Regional 5
13
20
Regional 6
2
5
Regional 7 Total Institusi
3 ( total 53 dari 64 penyelenggara ners)
7 ( total) 90 (dari 140 penyelenggara ners)
Total peserta
862
1418
CBT
13
17
REKAP INSTITUSI.xlsx
23
02/10/2012
Hasil TO UKNI Try Out
2011
Buku
2012
TOTAL
1
2
TOTAL
1
2
3
4
Jumlah Peserta
862
437
425
1418
358
352
354
354
Jumlah Soal
360
180
180
720
180
180
180
180
Nilai Rerata (+ SB)
45.08 45.24 45.16 (+ 7.31) (+ 6.92) (+ 7.68)
44.84 (+6.99)
44.53 44.63 45.70 44.49 (+ 6.52) (+ 7.20) (+ 7.21) (+ 6.95)
Nilai Tertinggi
68.33
61.67
68.33
63.89
60.00
61.11
63.89
62.78
Nilai Terendah
24.44
26.67
24.44
21.11
23.89
23.89
21.11
25.00
KR21
0.74
0.72
0.77
0.72
0.68
0.74
0.74
0.72
Rerata Indeks Kesulitan
0.45
0.45
0.45
0.45
0.45
0.45
0.46
0.44
% Soal Baik
40.56
38.89
42.22
40.56
38.33
42.22
39.44
42.22
Analisa hasil TO 0 Jumlah peserta untuk setiap booklet soal cukup
antara minimal 350 peserta dengan distribusi penjawab telah di acak untuk setiap soal di jawab oleh institusi regional untuk menghitung validitas dan reliabilitas serta distraktor
0 Ada perwakilan regional 0 bancmarking nasional untuk setiap soal 0 Dapat melihat kemampuan institusi regional
24
02/10/2012
Nilai rata rata 0 menunjukan nilai rata –rata yang dapat di jawab oleh
seluruh peserta dengan SD 0 Arti: masih rendah dari harapan , mungkin di sebabkan oleh berbagai faktor diantaranya : 1. Soal masih dianggap sulit : kompetensi mahasiswa kurang (kompetensi peserta kurang) 2. Kualitas soal kurang bagus, ambigue, kurang jelas, membingungkan ( penulis soal?, reviewer?, pengajaran di institusi, pola belajar institusi, dsb) 3. Proses belajar belum mengacu pada kompetensi esensial dan blue print
KR 21 0 Menunjukan reliabilitas booklet soal : paling tidak
harus 0,70 0 Semakin tinggi semakin reliable soal 0 KR 21 ini cukup tapi belum memuaskan karena masih ada di kisaran 70 % 0 Mungkin di sebabkan oleh : - penulis soal masih kurang dapat melihat kompetensi esensial - Kurikulum belum menggambarkan kompetensi yang hendak di capai
25
02/10/2012
Tingkat kesulitan 0 Sangat di pengaruhi oleh :
- kemampuan peserta - proses pengajaran yang kurang sesuai : kurang fokus - Pengajaran tidak sesuai dengan kompetensi - Proporsi pengajaran dalam kurikulum kurang sesuai - Tingkat kompetensi yang di tulis dalam soal terlalu tinggi - bentuk soal yang kurang sesuai kaedah :
Tinjauan 1 160
140
120 Jumlah Soal 1
100
Rerata 1 Jumlah Soal 2 Rerata 2
80
Jumlah Soal 3 Rerata 3
60
Jumlah Soal 4 Rerata 4
40
20
0 T1-1
T1-2
T1-3
26
02/10/2012
Tinjauan 2 160
140
120 Jumlah Soal 1
100
Rerata 1 Jumlah Soal 2 Rerata 2
80
Jumlah Soal 3 Rerata 3
60
Jumlah Soal 4 Rerata 4
40
20
0 T2-1
T2-2
T2-3
Tinjauan 3 60
50
40
Jumlah Soal 1 Rerata 1 Jumlah Soal 2 Rerata 2
30
Jumlah Soal 3 Rerata 3 Jumlah Soal 4 20
Rerata 4
10
0 T3-1
T3-2
T3-3
T3-4
T3-5
T3-6
T3-7
T3-8
T3-9
27
02/10/2012
Tinjauan 4 70
60
50 Jumlah Soal 1 Rerata 1 40
Jumlah Soal 2 Rerata 2 Jumlah Soal 3
30
Rerata 3 Jumlah Soal 4 Rerata 4
20
10
0 T4-1
T4-2
T4-3
T4-4
T4-5
Tinjauan 5 120
100
80
Jumlah Soal 1 Rerata 1 Jumlah Soal 2 Rerata 2
60
Jumlah Soal 3 Rerata 3 Jumlah Soal 4
40
Rerata 4
20
0 T5-1
T5-2
T5-3
T5-4
28
02/10/2012
Tinjauan 6 40
35
30
Jumlah Soal 1
25
Rerata 1 Jumlah Soal 2 Rerata 2
20
Jumlah Soal 3 Rerata 3 15
Jumlah Soal 4 Rerata 4
10
5
0 T6-1
T6-2
T6-3
T6-4
T6-5
T6-6
T6-7
T6-8
T6-9
T6-10
T6-11
Tinjauan 7 45
40
35
30
Jumlah Soal 1 Rerata 1
25
Jumlah Soal 2 Rerata 2 Jumlah Soal 3
20
Rerata 3 Jumlah Soal 4
15
Rerata 4
10
5
0 T7-1
T7-2
T7-3
T7-4
T7-5
T7-6
T7-7
T7-8
T7-9
T7-10
T7-11
T7-12
29
02/10/2012
Terima Kasih success
30