EVALUASI LEVEL 1 (REACTION)

Disusun : LIES SUNARMINTYASTUTI K

D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

EVALUASI LEVEL 1 (REACTION)

Pokok Bahasan Evaluasi Level 1 (Reaction) K

1.Pengertian Evaluasi 2.Manfaat Evaluasi 3.Evaluator dan Manajemen Evaluasi 4.Langkah-langkah evaluasi meliputi : a)Mempersiapkan evaluasi (persiapan dan desain evaluasi) b) Mengembangkan instrumen. c) Mengumpulkan,menganalisis data dan menafsirkannya. d) Menyusun Laporan D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

• • • •

Pengertian Evaluasi Level 1 (reaction ) D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Secara umum ditujukan untuk mengukur tingkat kepuasan peserta /mahasiswa terhadap pelaksanaan pelatihan/pendidikan

MANFAAT EVALUASI D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

1. Menyempurnakan pelaksanaan program diklat/program studi khususnya untuk reaksi atau yang berhubungan langsung dengan komponen kepuasan peserta diklat/ mahasiswa atau yang berpengaruh terhadap hasil belajar peserta diklat/mahasiswa 2. Sebagai dasar untuk pengambilan keputusan untuk melaksanakan tindak lanjut perbaikan seluruh komponen yang berhubungan dengan pelaksanaan diklat/program studi tersebut

EVALUATOR DAN MANAJEMEN EVALUASI D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Keberhasilan kegiatan evaluasi akan ditentukan oleh siapa yang melakukannya ,yaitu EVALUATOR. • EVALUATOR adalah orang yang dipercaya oleh pemilik program diklat/program studi /stake holder untuk melaksanakan evaluasi • Siapa yang akan menjadi EVALUATOR sangat bergantung pada pemilik program diklat/program studi/ stakeholder • Pada saat ini penanggung jawab pelaksanaan evaluasi di Pusdiklat adalah Bidang Evaluasi dan di STAN adalah Bidang Akademis

Lanjutan Evaluator dan manajemen evaluasi............... D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• EVALUATOR harus dipilih orang-orang yang memiliki kompetensi dibidangnya • KOMPETENSI/ketrampilan yang perlu dikuasai evaluator secara umum adalah : Kompetensi manajemen,kompetensi teknis, kompetensi konseptual dan kompetensi di bidang studi • Pelaksanaan kegiatan evaluasi berkaitan dengan pemanfaatan tenaga ,waktu,biaya,sumber dana ( khusus di BPPK biaya dan sumber dana sudah melekat pada TUPOKSI Bid Evaluasi/Bid Akademis)

Lanjutan evaluator dan manajemen evaluasi......... D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• TIGA FUNGSI MANAJEMEN YANG UTAMA DAN PENTING DALAM MENGELOLA KEGIATAN EVALUASI adalah : 1) Penjadwalan, 2) Penugasan staf dan monitoringnya ,3) Pembiayaan( kalau bukan termasuk tupoksinya ) • Tenaga yang berperan dapat dikelompokan dua yaitu, tenaga evaluator dan tenaga penunjang/pembantu

KOMPONEN EVALUASI LEVEL 1 (REACTION) Yang berhubungan dengan kepuasan peserta diklat/mahasiswa


K

Isi materi Kualitas materi

Metode pembelajaran

Kepuasan peserta/maha siswa

Pengajar/ instruktur/ fasilitator

Sarana/ prasara na

Akomodasi /konsumsi (khusus peserta pelatihan)

Faktor yang berpengaruh pada ketercapaian pembelajaran (hasil belajar peserta/mahasiswa)

Pembelaja ran dan kapasitas instruktur /dosen


K

Sarana &prasarana ( Perpus, ruang belajar)

Fisik & psikis peserta/ma hasiswa

Materi/ Kurikulum dan bahan ajar

Manaje men

lingkungan

MEMPERSIAP KAN EVALUASI


K

LANGKAH-LANGKAH EVALUASI LEVEL 1 ( REACTION )

MENGEMBANG KAN INSTRUMEN

MENGUMPULKAN, MENGANALISIS DATA DAN MENAFSIRKANNYA

SUMBER, SARANA, PRASARANA

MENYUSUN LAPORAN

Langkah 1 :Persiapan Evaluasi atau Penyusunan Desain Evaluasi D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Langkah pertama merupakan kegiatan persiapan atau perencanaan evaluasi yang menghasilkan desain evaluasi • Evaluator mempersiapkan segala sesuatu berkaitan dengan pelaksanaan evalusi dan kegiatannya terdiri atas tiga kegiatan pokok yaitu : 1. Menentukan tujuan atau maksud evaluasi 2. Merumuskan informasi 3. Menentukan cara mengumpulkan data

1.1. Menentukan maksud /tujuan Evaluasi D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Evaluator sebaiknya menampung keinginan lembaga dan unit pengguna serta memahami permasalahan yang dihadapi. • Contoh rumusan tujuan evaluasi reaction: 1. Mengukur sejauh mana proses pembelajaran/metode belajar suatu mata pelajaran dapat diterima oleh peserta diklat/mahasiswa 2. Mengukur sejauh mana kenyamanan ruang kelas yang digunakan untuk diklat

1) KEJELASAN


K

KRITERIA YANG DIGUNAKAN DALAM MERUMUSKAN TUJUAN EVALUASI :

2) KETERUKURAN

3) KEGUNAAN DAN KEMANFAATAN 4) RELEVANSI DAN KESESUAIAN


K

1.2. MEFOKUSKAN EVALUASI: Merumuskan Pertanyaan Evaluasi dan Menentukan Jenis Informasi yang akan dicari • Merumuskan pertanyaan evaluasi berarti harus membatasi evaluasi yang dimaksud • Merumuskan pertanyaan evaluasi berdasarkan tujuan evaluasi Misal: tujuan evaluasi untuk mengukur efektivitas proses pembelajaran/metode pembelajaran untuk mata pelajaran kepemimpinan dan ingin memperbaikinya ,maka pertanyaan evaluasi dirumuskan sbb : 1)Bagaimana penilaian peserta terhadap proses pembelajaran mp kepemimpinan ? 2)Apakah peserta menyukainya ? 3)Apakah teknik/metode belajarnya sudah sesuai ? 4) Bagian manakah (dari mp kepemimpinan ) yang berjalan efektif dan bagian manakah yang tidak /membosankan ?

1.3.MENENTUKAN CARA PENGUMPULAN DATA D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Pada langkah ini ditentukan metode evaluasi yang ditempuh ( misal : Survei,Wawancara ) • Disamping itu ditentukan pendekatan dalam pengumpulan datanya ( kualitatif atau kuantitatif ) • Masing-masing pendekatan tsb memiliki prosedur yang berbeda. • Penentuan ini harus sejalan dengan tujuan evaluasi yang telah dirumuskan sebelumnya

FORMAT DAN CARA PENYUSUNAN DESAIN D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Desain evaluasi yang komprehensif menetapkan sebelas hal tentang pokok –pokok evaluasi meliputi ; 1 .Obyek atau sasaran Evaluasi. 2. Merumuskan tujuan 3. Menentukan penerima laporan evaluasi 4. Merumuskan pertanyaan evaluasi 5. Menentukan informasi yang dikumpulkan 6. Menentukan teknik pengumpulan informasi 7.Menentukan instrumen 8.Menentukan teknik analisis data 9. Cara interpretasi dan penarikan kesimpulan 10.Menentukan jenis/bentuk laporan 11. Menentukan teknik Laporan


K

Contoh Rancangan Evaluasi Kepuasan peserta diklat/mahasiswa terhadap pengajar (widyaiswara/dosen/instruktur) • Obyek: Kegiatan diklat evaluasi yang dilaksanakan oleh Pusdiklat Keuangan Umum • Tujuan: Memperoleh informasi tentang teknik/metode/cara mengajar seluruh pengajar diklat evaluasi • Penerima laporan: Lembaga diklat/penanggung jawab diklat dan pengajar ybs sebagai umpan balik

Lanjutan contoh rancangan evaluasi.... D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Pertanyaan evaluasi: contoh, 1) Pengajar memberikan materi sesuai dengan pokok bahasan?, 2) Pengajar menyajikan materi dengan metode pembelajaran yang menarik,variatif dan kreatif? • Informasi yang dikumpulkan: 1).Deskripsi tentang karakteristik pengajar yang ideal, 2) Pendapat ahli tentang seorang pengajar yang ideal.

Lanjutan contoh rancangan evaluasi.... D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Teknik pengumpulan data: tatap muka langsung ,survei,wawancara • Instrumen: Kuesioner untuk peserta diklat/mahasiswa, kuesionare untuk evaluator • Teknik analisis: Analisis statistik deskriptif, analisis kualitatif • Interpretasi dan kesimpulan: Signifikan dg data yg disajikan, manfaatnya untuk perbaikan diklat selanjutnya khususnya data pengajar.

Lanjutan contoh rancangan evaluasi..... D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Bentuk Laporan: Laporan lengkap dan Laporan Eksekutif. • Penyampaian: Tertulis, lisan dalam bentuk presentasi

Langkah 2: Mengembangkan INSTRUMEN D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Pada tahap ini ditentukan bentuk instrumen yang akan digunakan serta kepada siapa instrumen tersebut ditujukan serta perlu dikembangkan butir-butir dalam instrumen. • Instrumen dikembangkan atau mengadaptasi reliabilitas dan validitas instrumen • Pada langkah ini diperoleh umpan balik bagi perumusan informasi yang akan dicari dan ditentukan rencana teknik analisis data, interpretasi dan pelaporan yang akan dilakukan

Beberapa Hal Penting Tentang Instrumen D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Ada DUA karakteristik penting yang harus diketahui EVALUATOR yaitu RELIABILITAS dan VALIDITAS. • Ada beberapa pertanyaan yang perlu diperhatikan : 1. Apakah instrumen mengukur apa yang seharusnya diukur ? 2.Jika instrumen ditujukan kpd lebih dari satu kelompok yg mirip atau sama apakah hasilnya konsisten ?

Lanjutan beberapa hal penting instrumen.. D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

3.Apakah instrumen tsb cocok digunakan untuk populasi yang akan diukur ? 4. Apakah instrumen tsb menghasilkan data yg obyektif ? 5.Apakah instrumen tsb mudah diolah ?

Lanjutan pengembangan instrumen.... D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

1. VALIDITAS adalah keabsahan instrumen dalam mengukur apa yang seharusnya diukur . 2. RELIABILITAS adalah mengandung dua konsep yaitu keajegan dan konsistensi internal,serta menunjukan bahwa instrumen bila digunakan beberapa kali hasilnya stabil. 3. Disamping itu instrumen tersebut terdiri dari satu set butir pertanyaan yang satu sama lain saling terkait ( disebut konsistensi internal )

K D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

CONTOH : FORM EVALUASI PENGAJAR OLEH PESERTA Yang meliputi : aspek pengukuran atau variabel dalam evaluasi pengajar, penjabaran konsep variabel menjadi indikator


K

Langkah 3: MENGUMPULKAN dan MENGANALISIS DATA serta MENAFSIRKANNYA • Merupakan tahapan pelaksanaan dari apa yang dirancang ,dan evaluator terjun kelapangan mengimplementasikan disin yang telah dibuat mulai dari mengumpulkan, menganalisis data, menginterpretasikan dan menyajikan dalam bentuk yang mudah untuk dipahami dan komunikatif

Beberapa saran untuk melakukan pengumpulan data D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

A.MERENCANAKAN PENGUMPULAN DATA 1.Bagaimana cara merekrut Tenaga Pengumpul Data ? ( ketersediaan tenaga, persyaratannya, kemungkinan bias) 2. Bagaimana menentukan teknik pengumpulan data ? 3.Bagaimana Cara menentukan Kegiatan Pengumpulan Data ?

Lanjutan beberapa saran...... D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

B. MELAKSANAKAN PENGUMPULAN DATA: 1. Bagaimana melaksanakan pengumpulan data dg SELF REPORT?, yg sering digunakan KUESIONARE, SKALA RATING, SKALA RANKING, SEMANTIK DIFFERENTIAL,Pertanyaan singkat. 2. Bagaimana melaksanakan pengumpulan data dengan kuesionare ?

Lanjutan langkah 3............. D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Pada tahap ini harus diperhatikan masalah teknik penarikan sampel.Syaratnya sampel harus representatif atau benar-benar mewakili populasi dan diperoleh dengan cara yang benar. • Mengumpulkan data dengan mempergunakan instrumen yang reliabel dan valid. • Merupakan proses yang esensial dari evaluasi reaction sebaiknya dilaksanakan dialog atau tatap muka dengan obyek evaluasi ( peserta diklat ) dan dilengkapi dengan penilaian oleh evaluator melalui kegiatan observasi kelas

Lanjutan beberapa saran..... • • • • • • •


K

Faktor yang mempengaruhi tingkat pengembalian kuesionare : Latar belakang responden Kontak tindak lanjut Relevansi masalah bagi responden Sensivitas masalah Reward bagi responden yang mengembalikan Format kuesionare dan banyaknya halaman Kredibilitas peneliti dan sponsor penelitian

Lanjutan beberapa saran.... D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

3. Bagaimana melaksanakan pengumpulan data dengan teknik Observasi 4. Bagaimana mengumpulan data dengan teknik Wawancara. 5.Bagaimana mengumpulkan data dengan menggunakan tes

Lanjutan beberapa saran...... D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

C. PENGOLAHAN DATA. Setelah dihimpun datanya ada beberapa pertanyaan yg harus dijawab yaitu : a. Bagaimana cara mengolah datanya ? b. Apakah data yg berhasil dikumpulkan cukup berharga untuk dianalisis ? c. Bagaimana cara menganalisis data tersebut? d. Bagaimana temuan hasil analisis tersebut ditafsirkan ?

Lanjutan beberapa saran.... D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• JENIS DATA dan karakteristiknya. • Data secara umum dibedakan menjadi data KUALITATIF dan data KUANTITATIF. • Data kualitatif adalah data yg sifatnya tidak numerik dan data tsb biasanya dikumpulkan untuk menjaring informasi yg tidak dapat ditangkap scr kuantitatif. Contoh data kualitatif adalah data tentang alasan peserta diklat tidak termotivasi untuk aktif di kelas . • Data kuantitatif adalah data yg berbentuk angka (numerical). Contoh: data usia,data hasil tes. Data kuantitatif menurut sifatnya dibedakan menjadi data kontinyu, jenjang(rank), dikotomi, katagori

Lanjutan beberapa saran D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Data KONTINYU adalah data scr teoritis dapat memiliki nilai pada tiap titik kemungkinan pada suatu kontinum. Contoh: nilai tes akhir diklat menggunakan rentang nilai 0 s/d 100. • Data JENJANG atau RANK adalah data yg melukiskan posisi seseorang atau obyek dibandingkan dg keseluruhan keadaan.Contoh, data tentang peringkat prestasi hasil tes akhir peserta diklat tersusun mulai dari si Ali peringkat pertama ,Budi peringkat kedua dst

Lanjutan beberapa saran..... D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Data DIKOTOMI adalah data yg hanya mempunyai dua macam nilai yaitu : data yg benar-benar dikotomi (true dichotomy) contoh :data jenis kelamin terdiri dari lakilaki dan perempuan, data kelulusan terdiri dari lulus dan tidak lulus. Data dikotomi buatan (artificial). Contoh: peserta diklat dikelompokan menjadi peserta senior dan yunior. • Data KATEGORI adalah data yg bisa memiliki lebih dari dua kutub yg bukan dikotomi dan juga bukan kontinyu . Contoh :data mengenai tingkat partisipasi peserta diklatdalam kegiatan diskusi kelas: 1) sangat aktif, 2)aktif, 3) kurang aktif, 4) pasif

Lanjutan beberapa saran ,jenis data.... D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• PENYUSUNAN RENCANA PENGOLAHAN DATA • Perencanan penting agar kegiatan efektif dan efisien. Isi format meliputi :1)pertanyaan evaluasi,2)Deskripsi data, 3)Sumber informasi, 4) Metode analalisis,5) Keterbatasan • MENGORGANISASI DATA. • Ada tiga kegiatan yaitu: 1)Pengkodean,2)Membuat matrik tabulasi,3)Memasukan data yg telah dikode ke matrik tabulasi.

Lanjutan beberapa saran jenis data.. D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• PRINSIP dan KRITERIA dalam MENGANALISIS DATA. • Ada beberapa prinsip dan kriteria misal: a) jangan terlalu menyederhanakan, b)Perhatikan perbedaan-perbedaan tentang kondisi yg mempengaruhinya, c)Gunakan teknik beragam,d)Yakin bahwa asumsi yg digunakan untuk analisis telah sesuai dg data yg diperoleh,e)Gunakan metode yg cocok dg tujuan,f) Gunakan metode praktis dan analisis yg sederhana serta biaya terjangkau

Lanjutan beberapa saran jenis data.. D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• PROSEDUR • ANALISIS( KUANTITATIF ) • Ada tiga jenis prosedur analisis kuantitatif yg sering digunakan dalam evaluasi diklat yaitu : statistik deskriptif, analisis korelasi ,dan uji hipotesis. • CONTOH penggunaan Statistik Deskripsi • Deskripsi program :Program ini bertujuan untuk mengetahui sejauh mana reaksi atau pendapat peserta diklat terhadap pelaksanaan program diklat • Pertanyaan Evaluasi, Apakah mayoritas peserta diklat mengatakan bahwa materi program diklat sesuai dengan kebutuhannya ? • Rancangan : Kemampuan menginterprestasikan diukur dengan hasil prestasi/hasil perbandingan pre tes dan post tes. • Rencana pengumpulan data : tes diberikan pada awal dimulai pembelajaran dan pada akhir pembelajaran

Lanjutan prosedur analisis kuantitatif.. D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Rencana analisis: statistik deskriptif dengan menghitung skor total pada awal dan akhir program. • Hasil analisis misalnya : nilai rata =85,2 . Simpangan baku 6,6 N = 120, Rank 65- 98 . Jumlah peserta yg mencapai skor 70 atau lebih = 107 orang. • Interprestasi : Dari seluruh peserta 120 orang ,nilai rata-rata adalah 85,2 yg berarti jauh lebih tinggi dari kriteria keberhasilan . Sebanyak 107 orang peserta menunjukan kemampuan menginterprestasikan kebutuhan materi sesuai dg baik. Simpangan baku dan rank kecil menunjukan bahwa kemampuan peserta relatif sama

Analisis data dengan Korelasi D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Contoh Penggunaan Korelasi: • Deskripsi Program: Program diklat bertujuan untuk meningkatkan kemampuan peserta dalam mengelola diklat. Misalnya Peserta diklat dinyatakan berhasil bila nilai dari kemampuan mengolah data statistik dengan komputer meningkat dengan ukuran dua persoalan selesai dg waktu 3jam dan hasilnya benar dan akurat. • Latar belakang evaluasi : Berdasarkan hasil evaluasi yg telah diadakan sebelumnya diketahui bahwa setelah selesai diklat sebagaian peserta berhasil sebagaian peserta gagal . Evaluator ditugasi untuk mengetahui faktor apa saja yg mempengaruhi hal tersebut dan salah satunya adalah faktor usia

Lanjutan data dengan korelasi D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Pertanyaan Evaluasi: Apakah ada hubungannya antara usia dengan keberhasilan mengikuti diklat pengelolaan diklat khususnya pengelolaan hasil evaluasi dengan komputer? • Rancangan: Vareabel terikat adalah kemampuan mengelola hasil evaluasi dengan komputer dan didasarkan atas skor tes pada n pada akhir diklat. Sedangkan vareabel bebas adalah usia peserta. • Rencana pengumpulan data: tes akhir diberikan dan data usia diambil dari bio data.

Lanjutan data dengan korelasi... D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Rencana analisis: Skor tes pengelolaan hasil dengan komputer dan usia peserta dikorelasikan dan dianalisis dengan rumus korelasi Product Moment dari Pearson. • Hasil analisis misalnya: koefisien korelasi (r) adalah -0,91. • Interprestasi: terdapat korelasi negatif yang tinggi antara skor tes dan usia . Temuan ini mengidikasikan bahwa tidak ada hubungan antara tingkat usia dan kemampuan mengolah data dengan komputer.

PROSEDUR ANALISA (KUALITATIF) D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Ada tiga jenis prosedur yang paling sering digunakan dalam evaluasi diklat yaitu: pendekatan gejala sosial,analisis isi, analisis catatan (record) • Metode analisis tersebut digunakan untuk mengolah berbentuk DATA DESKRIPSI sebagai hasil wawancara,studi kasus,cat kunjungan lapangan,rekaman dll. Data tersebut bersifat NARATIF, bukan ANGKA.

Lanjutan analisa kualitatif..... D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Analisis gejala sosial, pendekatan ini diperlukan pemeriksaan dan menginterpretasikan yg didasarkan kepada tingkatan gejala sosial dari yg paling kecil sampai yg paling besar. Contoh format meliputi: uraian pemeriksaan , penggambaran status tentang gejala, penggambaran tentang fase, langkah dan urutan.

PENGOLAHAN DATA WAWANCARA D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Hasil wawancara pada dasarnya suatu kesimpulan yg akurat dapat dipercaya yg diharapkan sebagai dasar dan bahan pembuat keputusan. Informasi yg akurat tsb dirumuskan berdasarkan atas pengolahan data wawancara dan disajikan dalam bahasa yg lugas,sederhana mudah dipahami dan ditafsirkan. • Contoh hasil wawancara menyimpulkan bahwa “Perlu materi baru yaitu tentang pengolahan hasil evaluasi secara kuantitatif dan kualitatif dengan menggunakan komputer” • Hasil wawancara direkomendasikan untuk penyempurnaan diklat yang akan datang.

D.PENAFSIRAN HASIL PENGOLAHAN DATA D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Hasil pengolahan data selanjutnya ditafsirkan untuk memudahkan dalam penyusunan kesimpulan dan rekomendasi. • Membuat interpretasi berarti membuat hasil analisis dibandingkan dengan standar tertentu,harapan, atau referensi lain. • Membuat penafsiran juga bermakna menafsirkan temuan dari kegiatan di lapangan.

Lanjutan penafsiran hasil pengolahan data ........ D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Referensi yg dapat yg dapat dijadikan dasar untuk interpretasi : 1)pertimbangan para ahli,2)pendapat masyarakat,3)standar institusi,4)peraturan hukum,5)laporan penelitian,6) Norma. • Prosedur untuk menilai temuan adalah: 1) Menguji signifikansi statistik,2) Menggunakan metode konsensus,3)Voting atau prosedur demokratis lainnya,4)Diskusi,pengkajian,5)Dengar pendapat,panel,6)Debat,7)Pendapat Individu,8)Pertimbangan para ahli

Langkah 4 : Menyusun LAPORAN EVALUASI D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Merupakan langkah terakhir dan disusun sesuai dengan tujuan diadakannya evaluasi. • Tujuan umum penyusunan pelaporan adalah untuk mengkomunikasikan informasi hasil evaluasi kepada penerima laporan • Ada beberapa hal yang harus diperhatikan : 1)jangan sampai mengabaikan penerima laporan, 2)Bedakan penerima laporan berdasarkan tujuannya,3) Perhatikan hak cipta,etika,hukum dan peraturan, 4) pertimbangkan kepentingan penerima laporan

A. JENIS LAPORAN D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

1. Pengumuman/berita. Laporan berupa pengumuman ,prss release atau berita ini ditujukan kepada masyarakat,isinya tentang sedang atau telah dilakukan evaluasi yg memuat alasan,tujuan,peranserta dll.Laporan ini dilakukan jika program yg dievaluasi merupakan program yg sangat menarik dan mendapat perhatian luas dari masyarakat. 2. Laporan kemajuan dan laporan sementara. Laporan ini menyajikan hal yg penting yg terjadi dalam evaluasi pada kurun waktu tertentu

Lanjutan jenis laporan.......... D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

3. Laporan Akhir . Laporan ini berisi informasi yg komprehensif tentang tujuan,obyek,kegiatan,temuan dan kesimpulan evaluasi. Laporan ini juga memuat rekomendasi yg dibuat evaluator 4.Laporan Intern. Laporan ini dimaksudkan untuk memenuhi keperluan intern biasanya ditujukan kepada staf evaluasi. Laporan ini berkaitan dg hal khusus yg berkaitan langsung dg evaluasi

B.PENERIMA LAPORAN D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

Peminat,masyarakat

Sponsor

LAPORAN EVALUASI DIKLAT

Sponsor Pengelola,pe serta program diklat

Sponsor Atasan,pengirim peserta,pengguna lulusan

C. PETUNJUK PENYUSUNAN LAPORAN D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

1.Pokok-pokok Isi Laporan. Suatu laporan yg baik hendaknya memuat hal-hal sebagai berikut : a)Pendahuluan atau pengantar evaluasi,pertanyaan evaluasi,keterbatasan evaluasi. b)Strategi Evaluasi,prosedur penarikan sampel dan kelemahannya c)Teknik pengumpulan data atau instrumen yg digunakan,keterbatasannya dan kegiatan penerapan di lapangan

Lanjutan pokok-pokok laporan.... D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

d)Metode yang digunakan untuk analisis data,keterbatasannya dan hasil setiap analisis e)Jawaban-jawaban untuk setiap pertanyaan evaluasi,termasuk interpretasi evaluator dan temuan serta rekomendasi yg disusun evaluator f)Penjelasan tentang hal-hal yg bersifat administratif seperti : jadwal,staf yg berperan serta lain-lain yg dipandang penting dan berguna

Contoh Pokok-pokok Laporan Evaluasi K

Contoh :LAPORAN EVALUASI Program :............ Lokasi :........... Evaluator :.......... Laporan ditujukan kepada :............ Periode waktu Laporan :............. Tanggal laporan disampaikan:........... D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

• • • • • • •

Lanjutan Laporan Evaluasi........ K

Bagian I. Rangkuman. Bagian II. Latar Belakang A.Deskripsi Program B.Tujuan Program C.Karakteristik Program D.Peserta Program E.Pihak-pihak terkait dengan Program D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

• • • • • • •

Lanjutan Laporan Evaluasi........ K

Bagian III .Deskripsi tentang Evaluasi A.Tujuan Evaluasi B.Rancangan Evaluasi C.Hasil yang diharapkan. Bagian IV .Hasil Pengolahan data Bagian V. Diskusi Hasil Bagian VI. Kesimpulan dan Rekomendasi D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

• • • • • • •

2. Kriteria Laporan yang baik D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

Ada beberapa hal yg perlu diperhatikan : 1)Isi laporan harus dibatasi dengan hal-hal yg penting dibutuhkan untuk menjawab pertanyaan evaluasi 2)Buatlah isi laporan seimbang,berikan tentang penjelasan alternatif dan interpretasinya 3)Buatlah isi laporan dalam bentuk prespektif ganda dari sudut pandang anda dan audien 4)Gunakan bahasa sederhana dan kalimat langsung,jangan membuat laporan yg terlalu kompleks

Lanjutan laporan yg baik.......... D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

5)Buatlah laporan sejelas mungkin,terutama mengenai temuan,interpretasi pendapat evaluator 6)Buatlah laporan yg terfokus pada tujuan evaluasi 7)Berikan kesempatan pada audien untuk memberikan umpan balik atau konfermasi,caranya melalui presentasi,kajian atau cara lain sehingga terjadi komunikasi dua arah 8)Berikan rangkuman untuk mengingatkan pembaca tentang isi pentingnya laporan 9)Jangan lupa berikan petunjuk untuk pembaca.

3. Menyiapkan dan Menulis Laporan Bagian demi Bagian D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

Contoh Lembar kerja Persiapan Laporan Akhir. 1.Daftar Audien yg akan menerima laporan dan waktu penyampaiannya. 2.Berapa jenis laporan yg akan dibuat 3.Untuk setiap jenis laporan lengkapi dg keterangan berikut: a)Laporan dibuat :formal,informal,tertulis,lisan b)Batas waktu penyelesaian draf c)Batas waktu penyelesaian grafik dan tabel d)Nama pengkaji draf final e)Tanggal pengiriman dari pengkaji f)Tanggal terima untuk revisi

LAPORAN EVALUASI yang baik sbb: D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

a).Menulis Bagian Pendahuluan, berisi tentang program yg dievaluasi,kelompok yg melaksanakan evaluasi,pendekatan evaluasi yg digunakan.Disamping itu menjelaskan proses untuk sampai kpd kegiatan evaluasi kaitannya dg tujuan program evaluasi dan manfaatnya b).Melaporkan Rancangan Evaluasi yang digunakan dan Teknik Sampling, adalah menjelaskan rancangan strategi evaluasi,prosedur smpling dan keterbatasannya. c).Melaporkan tentang Pengumpulan Data,berisi uaraian tentang instrumen yg digunakan dan langkah penggunaannya. Berikan informasi tentang reliabilitas,validitas instrumen,jelaskan scr singkat kegiatan lapangan dll

Lanjutan laporan evaluasi yg baik... D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

d)Melaporkan analisis data,berikan hasil analisis dan interpretasi temuan yg terkait dg pertanyaan evaluasi untuk setiap prosedur analisis. e)Melaporkan Temuan Evaluasi,yg terpenting adalah jawaban terhadap pertanyaan evaluasi. f) Melaporkan hal-hal yg bersifat administratif yaitu jadwal,urutan kejadian,keterlibatan staf dalam kegiatan evaluasi g)Membuat rangkuman evaluasi

4.PENYERAHAN DAN PRESENTASI LAPORAN D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

K

• Penyerahan laporan kepada yg berhak menerima sebaiknya dilakukan setelah diadakan diskusi dg orang-orang penting yg berhak menerima laporan. • Penyerahan laporan seharusnya diikuti dengan presentasi laporan

K D Pu TS Ke sd S E m ikl va en at lu te Ke as ria u i D n an ik Ke ga la ua n t 2 ng Um 01 an um 2 BP P

DILENGKAPI DENGAN CONTOH FORM EVALUASI REACTION OLEH PESERTA DIKLAT DAN OLEH MAHASISWA BESERTA LAPORAN HASIL EVALUASI YANG SUDAH ADA UNTUK DIEVALUASI

EVALUASI LEVEL 1 (REACTION)

Recommend Documents