B-18-1
PENGUKURAN MUTU JURUSAN : STUDI KASUS ITS MANAGEMENT AWARD 2004 Arie Kismanto Jurusan Statistika dan BAPSI ITS Surabaya Email :
[email protected] ABSTRAK Sebagai suatu siklus manajemen, maka suatu Jurusan yang mengelola beberapa program studi perlu melakukan evaluasi terhadap kinerjanya dalam suatu periode tertentu. Keberhasilan tercapainya target yang telah ditetapkan pihak manjemen diukur dengan indicator baik utama maupun tambahan. Pengukuran ini perlu dilakukan untuk mengetahui seberapa jauh manajemen Jurusan telah berusaha keras untuk mencapai target tersebut serta bagaimana pencapaiannya bila dibandingkan dengan periode sebelumnya atau dibandingkan dengan jurusan lain. Indikator kinerja untuk jurusan telah banyak ditetapkan baik oleh para pakar manajemen , pemberi block grant maupun pihak manajemen khususnya ITS sebagaimana termuat di dalam Garis Besar Program Kerja ITS tahun 2003-2007. BAPSI sebagai salah satu Biro di ITS telah melakukan pengukuran Mutu Jurusan dengan criteria tertentu dengan memodifikasi GBPK ITS. Untuk itu dalam makalah ini akan disampaikan hasil pengukuran tersebut. dengan harapan akan ada masukan perbaikan untuk masa mendatang. PENDAHULUAN Pada siklus manajemen khususnya dalam melakukan PDCA, maka suatu Jurusan yang mengelola beberapa program studi serta asset dan dana baik dari pemerintah maupun dana masyarakat perlu melakukan evaluasi terhadap kinerjanya dalam suatu periode tertentu. Keberhasilan tercapainya target yang telah ditetapkan pihak manjemen diukur dengan beberapa indicator. Pengukuran ini perlu dilakukan untuk mengetahui seberapa jauh manajemen Jurusan telah berusaha keras untuk mencapai target tersebut serta seberapa jauh tingkat bagaimana pencapaiannya (achievement) bila dibandingkan dengan periode sebelumnya atau dibandingkan dengan jurusan lain. Indikator kinerja untuk jurusan/program studi telah banyak ditetapkan baik oleh pemberi block grant maupun pihak manajemen ITS sebagaimana termuat di dalam Garis Besar Program Kerja ITS tahun 2003-2007. Penyusunan GBPK ITS tersebut didsarkan pada analsiis permasalahan, isu strategis yang ada dan tujuan yang hendak dicapai. Terdapat enam criteria bidang yang menjadi perhatian dalam penyusunan GBPK yaitu : input, Support, Proses, Output, Manajemen dan kepuasan stakeholder. BAPSI sebagai Biro di ITS yang ditunjuk oleh Rektor untuk melakukan evaluasi dan penilaian kinerja Jurusan telah melakukannya dengan criteria tertentu dengan memodifikasi GBPK ITS yang nampak seperti pada Tabel 1 Pada tahap pertama pemberian penghargaan ini pada tahun 2004 nampak kurang adanya penilaian terhadap siklus PDCA dari program kerja dan kegiatan Jurusan. Sehingga dengan adanya manajemen award ini diharap-kan akan selalu termonitor _____________________________________________________________________________ Prosiding Seminar Nasional Manajemen Teknologi I ISBN : 979-99302-0-0 25-26 Pebruari 2005 Program Studi Magister Manajemen Teknologi Institut Teknologi Sepuluh Nopember
B-18-2
perkembangan prestasi dan kemajuan manajemen Jurusan dalam mengelola suatu program studi atau jurusan sehingga secara sistematik akan mencapai tujuan pendidikan ITS. Makalah ini ditulis untuk menyajikan suatu cara pengukuran mutu suatu Jurusan di ITS dengan kriterai seperti pada table 1 untuk menentukan jurusan di ITS yang mendapat ITS Management Award tahun 2004. TEORI DASAR Tujuan dasar dari Manajemen Kinerja adalah untuk menetapkan dan memantapkan suatu budaya dimana para individu dan kelompok bertanggung jawab terhadap continuous improvement dari proses bisnis dan ketrampilan dan kontribusi mereka sendiri Efektifitas manajemen kinerja berkaitan dengan penentuan tujuan, penerjemahan tujuan kedalam rencana–rencana yang dapat diimplementasikan, pengukuran kinerja dan memotivasi tim untuk berkinerja. Elemen-elemen dari efektifitas personal, kesuksesan organisasi dan hasil pencapaian di tempat kerja membentuk manajemen kinerja. Prinsip–prinsip yang mendasari dari efektifitas proses manajemen kinerja adalah (1) harus dimiliki dan didorong oleh manajemen bukan oleh departemen SDM, (2) adanya penekanan pada tujuan yang di sharingkan. Ini berarti berkaitan dengan kemitraan, (3) manajemen kinerja bukan suatu paket solusi, (4)Manajemen kinerja dikembangkan secara spesifik dan individual untuk setiap organisasi, (5) manajemen kinerja diterapkan untuk semua tingkatan staf. Pengukuran kinerja memerlukan sejumlah tool yang (1) mampu mengkuantifikasi apa yang sedang diukur,(2) memungkinkan dibandingkan dengan kinerja standar yang telah ditetapkan atau yang telah diteliti dengan baik,(4) yang secara organisasi signifikan dan harus mendorong kinerja bisnis,(5) fokus pada output yang dapat diukur,(6)secara independen dapat dibuktikan/diverifikasi),(7) presisi, (8) komprehensif ,(9) mampu menerangkan bagaimana hasil-hasil tersebut dapat dicapai,(10) mampu memberi arahan tindakan perbaikan dan aktifitas peningkatannya. Setiap bisnis perlu disain tool dan metodologi untuk mengamati, mencatat dan menganalisis pengukuran yang spesifik yang diperluklan untuk mendorong kinerja bisnis tersebut. Sistem keseluruhan harus didorong untuk dapat diaudit secara independen hingga menjamin reliabitas dan validitas. Dimana bisnis yang tidak unik dan tidak baru maka perlu ada standart tertentu yang berlevel internasional misalkan perlunya adops. Bila tidak dapat diadopsi maka suatu cara perlu dikembangkan dan diimplentasikan. Namun demikian bila tak ada yang dapat diadopsi dari nasional atau internasional baik metodologi dan prosedur serta spesifikasi maka perlu didefinisikan oleh pemegang autority yang sesuai. Proses keberhasilan manajemen kinerja memerlukan suatu pengertian dari (a) bisnis proses, (b) task analysis, (c) potensial problem analysis. Sedangkan Kaplan dan Norton (1996) menyatakan bawah untuk pengukuran strategi bisnis ada 4 dimensi yaitu : (1) Financial Perspective, (2) Customer Perspective, (3) Internal-Business-Process Perspcetive dan (4) Learning and Growth Perspective.
_____________________________________________________________________________ Prosiding Seminar Nasional Manajemen Teknologi I ISBN : 979-99302-0-0 25-26 Pebruari 2005 Program Studi Magister Manajemen Teknologi Institut Teknologi Sepuluh Nopember
B-18-3
METODE PENGUKURAN Pada pengukuran kinerja Jurusan untuk menentukan Jurusan yang terbaik dalam kinerjanya selama tahun 2004 maka dilakukan langkah-langkah sebagai berikut : 1. Setiap jurusan dihitung dahulu prestasi dari setiap kriteria. Selama periode tahun akademik 2003-2004, kemudian dilihat masuk kategori yang mana. Dari setiap kategori diberikan bobot dengan skala 5,4,3,2,1 atau 5,3,1 (score kategori). 2. Pada kolom nilai prestasi, dicantumkan hasil angka/hitungan /prestasi yang diperoleh masing-masing criteria dengan nilai 5,4,3,2, dan 1. 3. Nilai prestasi dikalikan bobot yang sudah dinormalkan (total 100) sehingga diperoleh Nilai Akhir (Tabel 2) setiap kriteria. 4. Nilai akhir dari setiap kriteria ditotal, sehingga diperoleh Total Nilai Akhir dari setiap Jurusan. 5. Khusus untuk Jurusan /Prodi Baru yang belum meluluskan, maka untuk kriteria 1,2,3,4 dan 11 diberikan skor 1 (satu). 6. Pemilihan kinerja terbaik suatu Jurusan/Prodi adalah Jurusan yang mempunyai Nilai Total terbesar yang dilengkapi dengan data pendukung yang tersusun rapi sesuai dengan no urut kriteria penilaian. Dalam hal ini perlu diketahui bahwa : (a) Tidak ada kriteria yang diberikan nilai nol (0) dan (b) arti nlai 5 = Excellent , 4 = Good, 3 = Fair, 2 = Poor, 1 = Very Poor HASIL DAN DISKUSI Adapun hasil penilaian terakhir terhadap semua kriteria dari setiap Jurusan yang ada di ITS dapat dilihat pada table 2. Pada Tabel 2 tersebut terlihat sepuluh Jurusan yang mempunyai nilai tertinggi adalah : Arsitektur , Teknik Sipil, Teknik Industri, Statistika,Teknik Kimia, Teknik Mesin, Teknik Lingkungan, Teknik Informatika Matema-tika, Desaib Produk. Dengan mengacu pada pengkategorian peringkat maka Jurusan Teknik Arsitektur berpredikat Good, rangking 2 hingga 10. (Teknik Sipil – Teknik Informatika) berpredikat fair, rangking 11 – 17 (Matematika – Biologi) berpredikat poor sedangkan sisanya berpedikat very poor. Nampak bahwa masih banyak Jurusan di ITS yang berkinerja dibawah harapan. Dari hasil perhitungan ternyata Jurusan yang berhak mendapat ITS management award pada tahun 2004 adalah Jurusan Teknik Arsitektur,Teknik Industri , Teknik Mesin bahkan Teknik Mesin mendapat award kategori khusus yaitu kerapian manajemen karena criteria tersebut merupakan salah satu budaya kerja yang akan selalu ditumbuhkan dan dipelihara oleh pimpinan ITS. Walaupun Jurusan teknik Sipil, Statistika dan teknik Kimia mendapat nilai diatas Teknik Mesin sebagai juara ketiga tetapi kalah karena tidak lengkap data pendukungnya. Besarnya Jurusan baik karena jumlah dosen, mahasiswa dan dana, lama berdirinya Jurusan tersebut serta program studi yang dikelola belum diperhitungkan dalam penilaian tahun 2004 termasuk pula adanya factor kurikulum dan rangking SPMB. Walaupun baik secara langsung ataupun tak langsung hasil prestasi kinerja diduga ada hubungannya dengan kedua hal tersebut. Namun demikian yang amat disayangkan bahwa prestasi kinerja yang baik di Jurusan tertentu tidak mudah (mau) untuk ditiru oleh Jurusan lain. Artinya tidak terjadi _____________________________________________________________________________ Prosiding Seminar Nasional Manajemen Teknologi I ISBN : 979-99302-0-0 25-26 Pebruari 2005 Program Studi Magister Manajemen Teknologi Institut Teknologi Sepuluh Nopember
B-18-4
proses pembelajaran organisasi dI ITS ini. Pada umumnya Ketua Jurusan dan PD yang masih muda pengalaman manajemen dan kebijakan yang baru serta perubahan kurikulum, sesungguhnya menuntut perlunya forum sharing antar para pejabat /kajur /PD dalam memecahkan masalah yang terjadi di tempatnya maupun tempat lain dan sharing pengalaman kegagalan dan keberhasilan strategi manjemen yang telah dterapkannya. Serta perlunya para sesepuh pengalaman /mantan pejabat untuk berbagi strategi dan pengalaman kepada yang muda. Hal ini perlu karena mereka umumnya juga kurang konsisten dalam menjalankan siklus PDCA sebagai upaya continuous improvement karena masa jabatan hanya 4 tahun atau maksimal 8 tahun dimana banyak terjadi perubahan kurikulum akibat permintaan pasar terhadap lulusan yang senantiasa berkembang atau perubahan peraturan sehingga perlu sering adanya sosialisasi dari pihak manajemen. Salah satu fungsi pemberian penghargaan ini adalah untuk menjaga semangat pengelola Jurusan Selain itu perlu juga dicari upaya motivasi yang terus-menerus yaitu memberi apresiasi setiap upaya pengelola Jurusan yang berprestasi dan suasana yang kondusif khususnya prosedur dan mekanisme yang sederhana dalam manajemen. Artinya achievement juga harus menjadi salah satu criteria dalam penilaian kinerja suatu Jurusan. Misalkan perlunya penghargaan yang telah mencapai tiga kali berturutturut mendapat award, dan sebaliknya bagaimana pula dengan Jurusan yang nilai achievementnya rendah atau turun. Masih banyaknya Jurusan yang belum tertib administrasi khususnya dalam dokumentasi hasil karya ilmiah dosen. Untuk itu disarankan agar jurusan lain dapat menyontoh ketiga jurusan yang memperoleh award. Hal ini menunjukkan masih lemahnya pengelola Jurusan dalam menyadarkan dosen untuk bertanggung jawab dalam mengembangkan Jurusannya. Namun sebaliknya jika akan mengurus kenaikan pangkat untuk dirinya mereka rajin mengumpulkan berkas tersebut. Jika Ketua Jurusan mampu memperdayakan aspek ini maka akan bermanfaat untuk mengukur prestasi Jurusan serta mengetahui prestasi dosen dalam kepakarannya dan hal ini tentunya akan berdampak pada adanya kerjasama dan akhirnya mendatangkan dana yang masuk ke ITS khususnya pada era PTBHMN nanti. Selain itu salah satu ukuran keberhasilan suatu PT diukur dengan banyaknya karya ilmiah dosennya yang disitasi oleh peneliti lain. Karena itu perlunya pihak ITS memberi apresiasi yang tinggi terhadap dosen yang mampu berkarya pad level nasional dan internasional Pemanfaatan riset Tugas Akhir S2 atau S3 belum banyak yang diberdayakan oleh Dosen atau Jurusan sebagai karya ilmiah yang unggul sehingga mampu menembus berbagai Jurnal terakreditasi bahkan internasional. Jurusan Arsitektur memenangkan award ini karena banyaknya karya ilmiah mahasiswa S2 dan seminar nasional yang diikutinya. Hal ini tentu karena suasana akademik yang telah kondusif di Jurusan tsb KESIMPULAN DAN SARAN Berdasarkan hasil analisis diatas maka dapat ditarik bneebrapa kesilpulan dans aran yang dapat diakukan antara lain : 1, Dari hasil perhitungan ternyata Jurusan yang berhak mendapat award pada tahun 2004 adalah Jurusan Arsitektur teknik Industri , teknik Mesin bahkan teknik Mesin mendapat award kategori khusus yaitu kerapian manajemen. _____________________________________________________________________________ Prosiding Seminar Nasional Manajemen Teknologi I ISBN : 979-99302-0-0 25-26 Pebruari 2005 Program Studi Magister Manajemen Teknologi Institut Teknologi Sepuluh Nopember
B-18-5
2. Masih banyaknya Jurusan yang belum tertib administrasi khususnya dalam dokumentasi hasil karya ilmiah dosen. Untuk itu disarankan agar jurusan lain dapat menyontoh ketiga jurusan yang memproleh award tersebut 3. Selain itu perlu pula pihak ITS membuat aturan atau SOP yang akan dipakai oleh seluruh Jurusan di ITS dan dokumentasi siklus PDCA dari setiap Jurusan khususnya untuk mencapai target indicator utama dari GBPK ITS serta monitoring pelaksanaan PDCA tesebut 4. Perlunya ditambah kriteria lain seperti besarnya dana kerjasama yang diperoleh setiap jurusan serta kontribusi dosen dalam kegiatan mengamalkan kepakarannya baik untuk masyarakat luas atau konsultan dengan surat penugasan serta Penghargaan pencapaian (achievement) selama satu tahun dibandingkan dengan tahun sebelumnya dengan memperhatikan sumber daya khususnya dana dan fasilitas yang dimilikinya DAFTAR PUSTAKA 1. Kebijakan Dasar, Strategi dan Garis Besar Program Kerja ITS tahun 2003-2007 2. Performance Management Workshop Universitas Surabaya, 23-24 Agustus 2004, Surabaya 3. Kaplan RS dna Norton DP. Translating Strategy into Action : The Balanced Scorecard. Harvard Businee School Press, Boston, 1996 4. Niven.P.R. Balanced Scorecard Step by Step. :Maximizing Performance and Maintaing Results.John Wiley & Sons Inc.NY 2002. Tabel 1. KRITERIA,BOBOT, KATEGORI DAN PRESTASI PENGUKURAN KINERJA MANAJEMEN TAHUN AKADEMIK 2003-2004 No
Criteria
Bobot Kriteri a 10
1
Rata-rata Lama studi lulusan (semester)
2
Produktivitas Student Body
10
3
Produktivitas Lulusan/Yang harus lulus
10
4
Jumlah lulusan Cum laude
5
Kategori
< 9 smt 9-<10 smt 10-<11 smt 11-<12 smt >12 smt > 25% 20%-<25% 15%-<20% 10%-<15% <10% > 60% 50%-<60 40%-<50% 30%-<40% <30% >10 lulusan
score Kategor i 5 4 3 2 1 5 4 3 2 1 5 4 3 2 1 5
Prestasi
_____________________________________________________________________________ Prosiding Seminar Nasional Manajemen Teknologi I ISBN : 979-99302-0-0 25-26 Pebruari 2005 Program Studi Magister Manajemen Teknologi Institut Teknologi Sepuluh Nopember
B-18-6
5
Penyerahan semua nilai UAS tepat waktu sesuai jadwal BAAK
10
8-9 lulusan 6-7 lulusan 4-5 lulusan 0-3 lulusan 90%-100% 80%-<90% 70%-<80% 60%-<70% <60%
6
Prosentase rata-rata jumlah dosen yang hadir kuliah
7
>90%
5
80%–<90% 70%-<80% 60%-<70% <60% 0-2% >2%-4% >4%-6% >6%-8% >8% 0-1% >1%-2% >2%-3% >3%-4% >4% >0,20 0,14-0,19 0,08-0,13 0,02-0,07 <0,02 4 judul 3 judul 2 judul 1 judul 0 judul 5-6 bln >6-7 bln >7-8 bln >8-9 bln >9 bln Terakreditasi
4 3 2 1 5 4 3 2 1 5 4 3 2 1 5 4 3 2 1 5 4 3 2 1 5 4 3 2 1 5
7
Prosentase DO tahap persiapan
7
8
Prosentase DO dari seluruh mahasiswa
7
9
Rata-rata Jumlah judul makalah yang dipresentasikan dalam seminar internasional yang diikuti dosen/mhs Jumlah Paten yang diperoleh dosen/Jurusan
7
10
10
11
Rata-rata lama mengerjakan TA (dihitung FRS s/d maju ujian TA)
7
12
Menerbitkan jurnal ilmiah
9
4 3 2 1 5 4 3 2 1
_____________________________________________________________________________ Prosiding Seminar Nasional Manajemen Teknologi I ISBN : 979-99302-0-0 25-26 Pebruari 2005 Program Studi Magister Manajemen Teknologi Institut Teknologi Sepuluh Nopember
B-18-7
13
14
15
di bidang ilmunya (yang diterbitkan jurusan) Status akreditasi BAN
10
Mahasiswa/Jurusan/himpu nan Berprestasi (teladan, kejuaraan, dan yang selevel)
4
Setiap prestasipenghargaan yang diterima dosen /jurusan
5
16
Setiap judul tulisan dosen yang dimuat di jurnal
5
17
Setiap judul tulisan dosen/mhs yang dimuat mass media tentang IPTEK dll yang positif Indeks Prestasi Dosen semester gasal dan genap
3
18
7
Tdk terakreditasi Tdk/blm menerbitkan Status A B C Tingkat internasional (juara 1-3) Tingkat Nasional (juara 1-3) ITS (Juara 1-3)
3 1 5 3 1 5
Tingkat internasional (juara 1-3) Tingkat Nasional (juara 1-3) ITS (Juara 1-3) Internasional Akreditasi Belum terakreditasi Tingkat internasional Tingkat nasional Tingkat regional
5
3 1
3 1 5 3 1 5 3 1
>3,01 5 2,93-3,00 4 2,85-2,92 3 2,76-2,84 2 <2,75 1 TOTAL NILAI AKHIR
Keterangan : No. 12 :Jika diterbitkan oleh Fakultas : Bobot Kategori -----------------Jml Jurusan 14 : Nilai Prestasi = Jumlah kejuaraan x bobot Kategori 15 : Nilai Prestasi = Jumlah penghargaan x bobot Kategori 16 : Nilai Prestasi Jumlah judul = ------------------ x bobot Kategori Jumlah dosen
_____________________________________________________________________________ Prosiding Seminar Nasional Manajemen Teknologi I ISBN : 979-99302-0-0 25-26 Pebruari 2005 Program Studi Magister Manajemen Teknologi Institut Teknologi Sepuluh Nopember
B-18-8
Tabel 2. REKAPHASILNILAIKINERJAMANAJEMEN TAHUN2003/2004 KRITERIA NO
2
3
4
5
6
7
8
7,52
7,52
7,52
3,76
7,52
5,26
5,26
5,26
3 2 5 4 2 4 3 4 3 3 3 3 4 4 4 2 4 3 2 1 1 1
3 4 4 5 4 4 3 2 4 3 2 4 4 2 2 4 1 2 2 1 1 2
2 3 5 5 3 3 2 3 1 2 1 3 3 1 2 3 1 1 1 1 1 1
1 1 4 1 2 5 1 1 1 5 1 1 1 1 1 2 1 1 1 1 1 1
4 3 1 4 1 4 4 3 4 1 5 1 4 4 2 1 4 1 1 5 3 1
5 5 1 1 3 1 1 1 5 3 5 4 4 5 5 1 5 1 1 5 5 1
3 2 4 5 4 3 3 4 2 4 4 5 2 5 3 4 2 3 4 3 1 2
4 3 3 5 3 4 3 4 1 4 3 4 3 5 3 4 2 3 4 1 1 2
9
10
11
12
13
14
15
16
17
18
TOTAL
5,26 7,52 5,26 6,77 SCORE
7,52
3,01
3,76
3,76
2,26 5,26
100,00
5 5 5 5 5 5 5 3 3 5 3 3 3 1 1 5 1 5 5 1 1 5
5 4 4 1 1 1 2 1 2 1 1 1 1 1 1 1 2 1 1 1 1 1
4 5 1 1 1 1 4 1 1 1 1 1 1 1 1 1 1 1 1 1 1 1
3 1 2 1 2 1 1 5 1 1 1 3 2 1 1 1 1 1 1 1 2 1
PROGRAMSTUDI BOBOT
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22
1
TEKNIKARSITEKTUR TEKNIKSIPIL* TEKNIKINDUSTRI STATISTIKA* TEKNIKMESIN TEKNIKKIMIA* FISIKA* TEKNIKLINGKUNGAN DESAINDPRODUK** TEKNIKINFORMATIKA MATEMATIKA TEKNIKFISIKA KIMIA TEKNIKGEODESI ** TEKNIKMATERIAL TEKNIKELEKTRO BIOLOGI TEKNIKKELAUTAN TEKNIKSIS. PERKAPALAN PERENCANAANWIL. KOTA TEKNIKSISTEMINFORMASI TEKNIKPERKAPALAN FTIF
Catatan * = tanpadatapendukung
Arti Score:
1- buruksekali ( verypoor )
5 5 1 1 5 5 5 1 1 1 1 5 1 1 1 1 1 1 1 1 1 1
3 3 1 1 3 1 1 3 3 1 1 1 1 1 1 1 1 1 1 1 1 1
4 2 4 4 2 1 3 4 4 2 5 1 1 2 4 1 4 1 1 1 1 1
3 3 3 1 3 1 1 3 3 3 3 1 1 1 1 1 1 1 1 1 3 1
Total Nilai =( scorexbobot ) :
100- 180 - verypoor
** = Rekapitulasi PDI FTSP
2- buruk ( poor )
181- 260 - poor
3 jurusanFTKtidakikut berpartisipasi
3- cukup ( fair )
261- 340 - fair
1 jurusanTeknikElektrotidakikut berpartisipasi
4- bagus ( good)
341- 420 - good
BOBOT Faktor X
10 7,52
10 7,52
10 7,52
5- bagussekali ( excellence) 5 10 7 7 3,76 7,52 5,26 5,26
7 5,26
7 5,26
10 7 7,52 5,26
9 6,77
421- 500 - excellence 10 4 5 7,52 3,01 3,76
1 5 5 2 2 1 2 1 1 5 1 1 1 1 1 1 2 1 1 2 2 1
3 3 2 2 5 2 4 2 4 3 2 2 2 2 5 3 3 2 1 1 1 2
344 326 307 301 298 280 275 271 265 263 255 254 238 226 224 221 208 179 177 164 156 153
Peringat : =I
=II
5 3,76
3 7 133 2,26 5,26 100,00
_____________________________________________________________________________ Prosiding Seminar Nasional Manajemen Teknologi I ISBN : 979-99302-0-0 25-26 Pebruari 2005 Program Studi Magister Manajemen Teknologi Institut Teknologi Sepuluh Nopember
