PEMARKAHAN LAPORAN AKNC Anugerah Kualiti Naib Canselor 2014
PENILAIAN ITEM PROSES
GARISPANDUAN PEMARKAHAN FAKTOR YANG DINILAI (ITEM 1 HINGGA 6) Garispanduan ini bertujuan memastikan penilai mengambilkira empat elemen utama (ADLI) sebelum pemberian markah PANDUAN: Nilai tahap markah setiap elemen. Berpandukan empat markah ini tentukan markah keseluruhan faktor yang dinilai (gandaan 5 markah). Markah keseluruhan adalah persepsi penilai terhadap item yang dinilai secara keseluruhan. (tidak semestinya purata) Factor
Approach
Deployment
0-5%
Tiada pendekatan sistematik kepada keperluan item yang jelas. Maklumat diberi tidak berserta bukti 0 5 Tiada atau tiada cukup bukti usaha penyebaran dilakukan (no deployment) bagi manamana pendekatan
0
Learning
Integration
5
Penambahbaikan hanya melalui reaksi kepada masalah yang timbul dan tiada bukti berorientasikan penambahbaikan
0 5 Unit-unit beroperasi secara berasingan dan tiada bukti terdapat halatuju di selarikan
0
5
10-25%
30-45%
Diperingkat awal pendekatan sistematik kepada keperluan item yang agak jelas.
Pendekatan yang sistematik, responsive kepada sebahagian keperluan asas bagi item agak jelas.
10 15 20 25 Pendekatan diperingkat awal penyebaran (early stage of deployement) di kebanyakan unit, yang membantukan progress dalam memenuhi keperluan asas item yang dinilai 10 15 20 25 Diperingkat awal atau transisi daripada reaksi kepada masalah kepada berorientasikan penambahbaikan
30 35 40 45 Pendekatan disebar (deployed) tetapi terdapat beberapa unit masih di tahap awal penyebaran (deployment)
10 15 20 25 Pendekatan diselarikan antara unit melalui penyelesaian masalah secara bersama.
10
15
20
25
50-65%
70-85%
Pendekatan yang sistematik, responsive kepada kesemua keperluan asas bagi keseluruhan item agak jelas. 50 55 60 65 Pendekatan disebar secara meluas (well deployed) tetapi terdapat perbezaan dibeberapa jabatan/unit
Pendekatan yang sistematik, responsive kepada berbagai keperluan asas bagi item agak jelas.
30 35 40 45 Peringkat awal pendekatan sistematik kepada penilaian dan penambahbaikan jelas.
50 55 60 65 Proses penambahbaikan berdasarkan fakta, penilaian secara sistematik dan terdapat bukti pembelajaran organisasi kearah penambahbaikan keberkesanan dan kecekapan proses-proses utama
30 35 40 45 Peringkat awal alignment dengan keperluan organisasi yang telah dikenalpasti berasaskan profil organisasi bagi item yang dinilai
50 55 60 65 Pendekatan diselarikan dengan keperluan PTJ berpandukan Profil PTJ dan item proses selainnya
70 75 80 85 Proses penambahbaikan berdasarkan fakta, penilaian secara sistematik dan terdapat bukti pembelajaran organisasi diguna sebaiknya sebagai alat pengurusan. Terdapat bukti jelas pemurnian dan inovasi terhasil dari analisis data dan perkongsian maklumat 70 75 80 85 Pendekatan diintegrasikan dengan keperluan PTJ dikenalpasti melalu respon kepada Profil PTJ dan proses item selainnya
30
35
40
45
50
55
60
65
70 75 80 85 Pendekatan disebar secara meluas (well deployed) tanpa jurang yang signifikan
70
75
80
85
90-100%
Pendekatan berkesan, dan sistematik, responsif kepada keperluan yang pelbagai untuk item yang dinilai jelas kelihatan. 90 95 100 Pendekatan disebar secara menyelurush (fully deployed) tanpa kelemahan yang signifikan di mana-mana unit
90 95 100 Proses penilaian dan penambahbaikan berdasarkan fakta yang sistematik dan pembelajaran organisasi merupakan alat pengurusan dikeseluruhan PTJ. Pemurnian dan inovasi disokong dengan analisis data dan perkongsian jelas berlaku. 90 95 100 Pendekata diintegrasikan dengan sangat baik berdasarkan keperluan PTJ berdasarkan respon kepada Profil PTJ dan proses item selainnya 90 95 100
Penilaian Proses • Empat elemen penting proses – Pendekatan (A) – Penggunaan yang meluas (D) – Pembelajaran (L) – Integrasi (I)
PENDEKATAN (Approach) Adakah pendekatan sistematik? Pendekatan yang sistematik boleh diulang dan menggunakan data dan maklumat yang membolehkan pembelajaran. Pendekatan adalah sistematik sekiranya ia mengandungi peluang untuk dinilai, ditambahbaik, inovasi dan berkongsi pengetahuan, yang dapat menunjukkan proses yang lebih matang. 5
PENGGUNAAN YANG MELUAS (Deployment) Maklumat deployment perlu menjelaskan bagaimana pendekatan dilaksana di bahagianbahagian dalam organisasi (sebar luas atau menyeluruh). Ia boleh ditunjukkan dalam bentuk jadual.
6
PEMBELAJARAN (Learning) Proses-proses seharusnya mengandungi kitaran penilaian dan penambahbaikan, yang mempunyai keupayaan untuk berubah dengan signifikan. Penambahbaikan proses seharusnya dikongsi dengan unit-unit yang relevan di dalam organisasi bagi membolehkan pembelajaran organisasi. 7
INTEGRASI (Integration) Integrasi menunjukkan penjajaran dan pengharmonian antara proses-proses, perancangan, ukuran-ukuran, tindakantindakan, dan hasil yang menghasilkan keberkesanan dan kecekapan organisasi.
8
PENILAIAN ITEM HASIL
GARISPANDUAN PEMARKAHAN BAGI ITEM HASIL (ITEM 7 DAN 8) Garispanduan ini bertujuan memastikan penilai mengambilkira empat elemen utama penilaian hasil (LeTCI) sebelum pemberian markah PANDUAN: Nilai tahap markah setiap elemen. Berpandukan empat markah ini tentukan markah keseluruhan Hasil yang dinilai (gandaan 5). Markah keseluruhan adalah persepsi penilai terhadap item yang dinilai secara keseluruhan. (tidak semestinya purata) Guidelines
0-5%
Elemen Pertama (Levels/trends)
Tiada Pencapaian Hasil di tunjuk atau Hasil pencapaian yang amat rendah dan tidak memuaskan
Elemen Kedua (Trends/ sustained results)
Tiada laporan yang menunjukkan tren atau Laporan menunjukkan tren yang sangat negative
Elemen Ketiga (Comparisons/ benchmarks)
0
5
0
5
0
5
Tiada maklumat perbandingan
10-25%
Terdapat beberapa hasil pencapaian yang dilaporkan. Terdapat sedikit penambahbaikan atau diperingkat awal pencapaian baik dibeberapa bidang utama tetapi belum meluas.
30-45%
Terdapat tren penambahbaikan atau Tahap pencapaian baik pada beberapa bidang utama bagi item yang dinilai
10
15
20 25 30
35
40
45
10
15
20 25 30
35
40
45
10
15
20 25 30
35
40
45
Tidak banyak data tren yang dilaporkan atau kebanyakkan teren yang dilaporkan menunjukkan pencapaian menurun.
Maklumat perbandingan yang sedikit/minimum
Ada data tren dilaporkan dan kebanyakan tren diperingkat awal analisis.
Terdapat bukti diperingkat awal usaha mendapatkan maklumat perbandingan
50-65%
Terdapat tren penambahbaikan atau Tahap pencapaian baik dikebanyakkan bidang utama bagi item yang dinilai
50
55
60
65
Terdapat bukti tren yang berfaedah dalam bidang utama untuk membantu peningkatan pencapaian misi organisasi.
70-85%
Tahap penambahbaikan atau pencapaian baik ke cemerlang di kebanyakan bidang utama dan berkaitan bagi item yang dinilai
70
75
80
85
Kebanyakkan tren penambahbaikan dikekalkan dalam kebanyakkan bidang utama dan membantu peningkatan pencapaian misi organisasi.
Terdapat beberapa tahap pencapaian dinilai dan dibanding atau dibenchmark Terdapat bukti pencapaian baik.
50
55
60
65
Banyak tren atau tahap pencapaian terkini dibandingkan atau benchmark dan terdapat bukti pencapaian sangat baik .
70
75
80
85
50
55
60
65
70
75
80
85
90-100%
Tahap pencapaian semasa cemerlang dikebanyakkan bidang utama bagi criteria yang dinilai
90
95
100
90
95
100
90
95
100
Kebanyakkan tren penambahbaikan dikekalkan dalam kesemua bidang utama dan membantu peningkatan pencapaian misi organisasi.
Jelas menunjukkan banyak perbandingan atau benchmark dengan industry berkaitan dan telah mencapai tahap tertinggi.
Elemen KeEmpat (Importance of results)
Hasil bidang utama yang penting kepada pencapaian misi organisasi tidak dilaporkan.
Hasil beberapa bidang utama yang penting kepada pencapaian misi organisasi dilaporkan. Tiada atau sedikit prestasi pencapaian dilaporkan
Hasil kebanyakkan bidang utama yang penting kepada pencapaian misi organisasi dilaporkan. Tiada atau sedikit prestasi pencapaian dilaporkan
Hasil kebanyakkan pencapaian PTJ memenuhi keperluan pelanggan/pelajar dan proses. Terdapat laporan jangkaan (projections) beberapa hasil pencapaian tinggi.
Hasil kebanyakkan pencapaian PTJ memenuhi keperluan pelanggan/pelajar,proses dan keperluan pelan tindakan. Terdapat juga laporan jangkaan (projections) untuk pencapaian masa depan.
Keseluruhan hasil pencapaian PTJ memenuhi keperluan pelanggan/pelajar,pros es dan keperluan pelan tindakan. Terdapat juga laporan jangkaan (projections) untuk pencapaian masa depan.
Penilaian Hasil & Inovasi • Empat elemen penting hasil – Tahap Prestasi (Le) – Tren (T) – Perbandingan (C) – Kepentingan/ Important (I)
PENILAIAN HASIL (RESULTS) Performance Level (KPI) • Tahap Pencapaian – Pencapaian berbanding sebelumnya – Pelunjuran (Extrapolation) – Sasaran (Target) – Perbandingan (Comparison) •Skala •Pencapaian setiap proses
PENGUKURAN HASIL (RESULTS) Trends • (Tren pencapaian penambahbaikan) – CGPA Pelajar – Peratus kegagalan
•Arah dan kecerunan lwn masa •Kitaran masa
PENGUKURAN HASIL (RESULTS) Comparison Perbandingan – Perbandingan angka yang bermakna – Perbandingan yang relevan – Perbandingan dalaman – Perbandingan dgn IPTA lain (External Benchmarking) – Peringkat antarabangsa
Antara Program Antara Bahagian Antara Kampus Purata Industri IPTA Benchmark
PENGUKURAN HASIL (RESULTS) Importance Kepentingan/keutamaan – Semua hasil proses utama dinyatakan mengikut segmen Contoh: segmen pelajar, pihak berkepentingan, sumber, proses, program pengajian. - Data yang dinilai adalah penting kepada organisasi
Results Presentation Formats • Terbaik • Buruk • Hodoh
7.1a-1: Kadar Kesilapan 100
Benchmark Benchmark
95
% Tanpa Kesilapan
90
Pesaing Terbaik
85 80
Purata
75 70 2002
Improvement
2003
2004 Source --
Total Quality
2005
2006
Inc. -- 2008 -- www.BestProcess.com
2007
2008
7.1a-1: Kadar Kesilapan Benchmark
100
Pesaing
% Tanpa Kesilapan
80
Purata
60 40 20 0
2002
2003
Benchmark
HEP
2004
2005
2006
Pesaing A
Source -- Total Quality Inc. -- 2008 www.Baldrige21.com
2007
2008 Improvement
Pesaing B
7.1a-1: Kadar Kesilapan % Tanpa Kesilapan
Year
Benchmark
HEP
Pesaing A
2001
97.5
85.7
75
2002
97.6
90.7
77.5
2003
97.7
93.3
80
71
2004
96.9
95
82.5
74
2005
97.7
95.3
85
76.7
2006
97.9
95.4
87.5
78
2007
98
95.8
90
84
Note: 2008 Purata Industri = 25% Kesilapan Source -- Total Quality Inc. -- 2008 www.Baldrige21.com
Pesaing B