PERFORMANCE ASSESSMENT DALAM PERSPEKTIF MULTIPLE CRITERIA DECISION MAKING
B. Multiple Criteria Decision Making
Asesmen merupakan proses pengambilan keputusan yang dilakukan guru dengann mempertimbangkan banyak kriteria dengan tujuan untuk memberikan penghargaan terhadap hasil kerja siswa. Fulop (2005) mengutip pendapat Haris, menyatakan bahwa decision making adalah studi pengidentifikasian dan pemilihan alternatif-alternatif berdasarkan nilai-nilai dan preferensi pengambil keputusan.
Multiple Criteria Decision Making (MCDM) merupakan salah satu metode yang paling
banyak digunakan dalam area pengambilan keputusan. Tujuan dari MCDM adalah memilih alternatif terbaik dari beberapa alternatif eksklusif yang saling menguntungkan atas dasar performansi umum dalam bermacam kriteria (atau atribut) yang ditentukan oleh pengambil keputusan (Chen, 2005:10). Ada 2 pendekatan dasar pada masalah MCDM, yaitu Multiple Attribute
Decision Making (MADM) dan Multiple Objective Decision Making (MODM) (Kahraman,
2008:1; Tseng and Huang, 2011:1). MADM mengambil keputusan dengan memperhatikan beberapa atribut yang kadang saling bertentangan, sedangkan dalam MODM banyaknya alternatif tak terbatas dan timbal balik antar kriteria dideskripsikan dengan menggunakan fungsi kontinu (Kahraman, 2008:2).
Sebagian besar masalah MCDM dalam praktek nyata melibatkan informasi yang tidak hanya kuantitatif akan tetapi juga kualitatif, yang bersifat tidak pasti. Dalam hal ini, masalah MCDM selayaknya dianggap sebagai masalah fuzzy MCDM yang melibatkan tujuan, aspek-aspek (dimensi), atribut (atau kriteria) dan kemungkinan alternatif-alternatif (atau strategi) (Tseng and Huang, 2011:2), Masalah MCDM diselesaikan dengan menggunakan teknik-teknik dalam bidang kecerdasan buatan (artificial intelligent) dan beberapa dekade terkahir menjadi kajian intensif dari
soft computing karena melibatkan teori himpunan fuzzy.
M-140
langkah: (1). Mendefinisikan masalah; (2). Menentukan kebutuhan; (3). Menetapkan tujuan; (4). Mengidentifikasi alternatif; (5). Mendefinisikan kriteria; (6). Memilih tool pengambil keputusan; (7). Mengevaluasi alternatif terhadap kriteria; dan (8). Memvalidasi solusi. Lebih ringkas, Tseng dan Huang (2011:1) menuliskan 4 langkah pengambilan keputusan meliputi; 1). Identifikasi masalah; 2). Menyusun preferensi; 3). Mengevaluasi alternatif; dan 4). Menentukan alternatif terbaik.
Berdasarkan uraian di atas, beberapa hal yang perlu diperhatikan dalam masalah MCDM adalah: 1). Alternatif; 2). Kriteria; 3). Preferensi; dan 4). Tool/teknik pengambil keputusan. Misal ada m kriteria (C1,…, Cm) dan n alternatif (A1,…,An). Masalah MCDM biasa direpresentasikan
dalam bentuk tabel keputusan seperti pada gambar 1 (Fulop,2005).
A1 . . An w1 C1 a11 . . am1 . . . . . . . . . . . . wm Cm am1 . . amn
Gambar 1. Tabel keputusan
Nilai aij menunjukkan skor kinerja alternatif Aj pada kriteria Ci yang merupakan preferensi
dari pengambil keputusan. Setiap kriteria mempunyai bobot wi yang menunjukkan tingkat
pentingnya kriteria Ci dalam proses pengambilan keputusan.
a. Alternatif dalam asesmen
Proses pengambilan keputusan dalam asesmen mempertimbangkan beberapa alternatif yang akan menjadi hasil keputusan akhir. Alternatif yang dimaksud dapat berupa siswa-siswa yang akan diberi penilaian, atau tingkatan nilai yang akan diberikan. Pada kasus yang pertama, hasil asesmen dapat berupa nilai akhir siswa beserta urutan rankingnya, sedangkan pada kasus kedua, hasil akhir berupa aturan (rule) atau pedoman penilaian yang dapat digunakan untuk menilai hasil kinerja siswa.
b. Kriteria dalam asesmen
Dalam analisisnya, Sadler (2005) menyatakan bahwa tidak ada kesepahaman umum tentang arti dari criteria-based dan implikasi dalam prakteknya. Konsep ‘kriteria’ dan ‘standar’ sering membingungkan, dan di samping penggunaan kriteria, penilaian fundamental dari guru tentang kualitas performansi siswa menjadi subjektif dan secara substansial tersembunyi dari pandangan siswa.
Secara terminologi, kriteria didefinisikan sebagai sifat yang membedakan atau karakteristik sesuatu hal, yang dengannya kualitas hal tersebut dapat dinilai atau diestimasi, sebuah keputusan atau klasifikasi dapat dibuat (Sadler, 2005). Kriteria adalah atribut atau aturan yang berguna sebagai pengungkit dalam membuat penilaian. Asesmen yang mengacu pada kriteria atau standar tertentu dalam penentuan keputusan diistilahkan dengan criteria-based assessment atau criteria-
referenced assessment.
Criteria-based assessment mengukur performansi siswa atas dasar kriteria/standar
kompetensi yang telah ditetapkan, performansi siswa tidak dibandingkan dengan siswa yang lain (Rose, 2011). Dalam pendekatan ini guru dapat menentukan nilai/ranking siswa berdasarkan kualiitas dalam skala numerik. Metode asesmen ini seringkali menggunakan rubric atau kriteria perangkingan yang detil tertulis yang menjelaskan apa yang harus dipelajari siswa dan bagaimana hal tersebut akan dievaluasi.
Proses menentukan dan mempertimbangkan kriteria memunculkan sudut pandang asesmen yang lebih luas dari sekedar tes dan perangkingan. Asesmen dipandang sebagai bagian terintegral dari pembelajaran, meliputi berbagai metode yang menghasilkan sumber informasi tentang
M-141
pembelajaran siswa yang saling melengkapi, dan memberi siswa dan guru analisis yang lebih lengkap tentang kejadian dalam pelajaran tertentu.
Ada beberapa hal yang perlu dipertimbangkan dalam menentukan kriteria asesmen, karena kriteria tersebut akan menentukan asesmen yang baik seharusnya (Garfield, 1994): a).Menyediakan informasi yang memberi kontribusi pada keputusan berkaitan dengan peningkatan kualitas pembelajaran; b). Sejalan dengan tujuan pembelajaran; c). Memberikan informasi yang dibutuhkan siswa; d).Menjadi pelengkap bagi hasil asesmen yang lain untuk memberikan deskripsi lengkap tentang apa yang diketahui siswa
Dalam kaitan dengan asesmen baik, Carless (2007) menggunakan istilah ‘learnin-oriented
assessment’ dan mengelaborasi 3 elemen yang menjadi prinsipnya, yaitu: a).Tugas asesmen harus
didesain untuk menstimulasi proses pembelajaran di antara siswa; b).Asesmen seharusnya melibatkan siswa secara aktif dalam melibatkan kriteria, kualitas performansi mereka atau kelompoknya; dan c).Umpan balik seharusnya dilakukan rutin pada waktu tertentu dan mendukung pembelajaran siswa sekarang dan yang akan datang.
Kriteria dalam asesmen menjadi penting karena dapat mengubah pendekatan siswa terhadap pembelajaran, dalam menyelesaikan tugas-tugas, dalam melakukan revisi dan pendekatan dalam ujian. Oleh karena itu, jenis kriteria penilaian harus didiskusikan terlebih dahulu dengan siswa dan kolega, agar jelas apa yang diinginkan dan bagaimana digunakan (Brown, 2001). Brown memberikan acuan asensi dari kriteria yang lebih baik adalah: a). Sesuai dengan tugas asesmen dan outcome pembelajaran; b).Memfungsikan konsistensi penilaian; c). Dapat menerjemahkan area ketidaksepakatan antar penilai; d). Membantu siswa mencapai outcome pembelajaran; e). Dapat digunakan sebagai feedback bagi siswa.
Brown (2001) menulis tipe-tipe utama kriteria yang digunakan dalam asesmen adalah: a). Intuitif (kriteria implicit). Tersembunyi dari siswa dan penilai yang lain; b). Global; c). Criterion
reference grading; d). Broad criteria; e). Specific criteria; f). Marking schemes; g). Checklist; h). Detailed checklist; i). Detailed criteria.
Pada dasarnya penentuan kriteria asesmen bermula dari apa yang akan diases. Menurut Garfield (1994), kerangka kerja asesmen yang pertama adalah menentukan apa yang akan diases, yang terbagi dalam 5 kelompok yaitu konsep (concepts), keahlian (skills), penerapan (application), atitud (attitudes), dan kepercayaan (beliefs). Ma and Zhou (2000) mengusulkan 4 langkah terkait dengan asesmen berbasis kriteria, yaitu: 1). Menentukan himpunan dasar kriteria asesmen; 2). Memilih kriteria asesmen dari himpunan dasar tersebut; 3). Menentukan bobot kriteria; dan 4). Mengevaluasi kinerja siswa atas dasar kriteria tersebut. Ada 3 kriteria dasar yang ditentukan oleh Ma and Zhou (2000), yaitu knowledge, attitude dan skills. Kriteria dasar tersebut selanjutnya dipecah lagi ke dalam kriteria yang lebih detil dan pemberian bobot yang relevan pada setiap kriteria untuk memperoleh tujuan asesmen yang ditentukan.
c. Ragam Preferensi
Guru sebagai pengambil keputusan memberikan preferensinya atas sejumlah kriteria yang telah disepakati. Pemberian preferensi oleh guru terhadap kinerja siswa dapat berupa nilai kuantitatif atau kualitatif. Outcome proses pembelajaran yang kompleks yang dihasilkan dari asesmen dengan cara memberikan penilaian kualitatif merupakan hal yang biasa ditemui pada berbagai mata pelajaran di sekolah menengah sampai perguruan tinggi. Penilaian kualitatif melibatkan multi kriteria, beberapa kriteria diantaranya bersifat fuzzy, dan hanya beberapa kriteria saja yang biasanya digunakan dari sekian banyak kriteria yang mungkin (Sadler, 2010:8).
Ada beberapa macam format preferensi yang dapat diberikan pengambil keputusan dalam MCDM. Chen (2005:108) menyebutkan ada 5 cara mengevaluasi preferensi pakar dalam masalah pengambilan keputusan: 1). Ordering preference; 2). Fuzzy preference relation; 3). Multiplicative
preference relation; 4). Utility function; dan 5). Variabel linguistik dengan fungsi konversi ke
M-142
format linguistik. Misal pengambil keputusan memberi preferensi terhadap 4 alternatif {A1, A2, A3,
A4} masing-masing A1 =”Sangat Baik”, A2 =”Baik”, A3 =”Cukup”, A4=”Kurang Baik”.
Perbedaan format preferensi oleh pengambil keputusan individu maupun kelompok terhadap kriteria sudah menjadi hal yang biasa dalam masalah MCDM, karena setiap kriteria dapat memiliki unit pengukuran yang berbeda. Dimensi kriteria yang berbeda dapat diselesaikan dengan proses normalisasi, yang bertujuan untuk mendapatkan skala nilai yang dapat diperbandingkan. Berbagai teknik normalisasi nilai preferensi terhadap kriteria telah menjadi bagian dari metode MCDM (Turskis and Zavadskas, 2010).
d. Metode penyelesaian MCDM
Turskis and Zavadskas(2010) menyatakan berbagai macam metode MCDM banyak digunakan untuk menyelesaikan permasalahan di bidang sains, bisnis dan pemerintahan. Metode- metode MCDM tersebut dikelompokkan sebagai berikut.
– Metode yang didasarkan pada pengukuran kuantitatif. Metode-metode yang berdasarkan
multiple criteria utility theory (MAUT) termasuk dalam kelompok ini, misal TOPSIS, SAW
(Simple Additive Weighting), LINMAP (Linear Programming Techniques for Multidimensional),
Analysis of Preference, COPRAS (Complex Proportional Assessment), COPRAS-G, dan ARAS
(Additive Ratio Assessment).
– Metode-metode yang berdasarkan pada pengukuran awal kualitatif (qualitative initial
measurements), meliputi 2 kelompok yaitu Analytic Hierarchy Methods (AHP) dan metode teori
himpunan fuzzy.
– Metode perbandingan preferensi yang berdasarkan pada perbandingan pasangan alternatif. Kelompok ini meliputi ELECTRE, PROMETHEE.
– Metode yang berdasarkan pada pengukuran kualitatif yang tidak dikonversi ke variable kuantitatif. Kelompok ini meliputi metode pengambilan keputusan pada data linguistik dan penggunaan data kualitatif yang melibatkan ketidakpastian tingkat tinggi.
Kahraman (2008:3) menyebutkan ada 20 macam metode penyelesaian MCDM, yaitu:
Dominance, Maximin, Maximax, Conjuctive, Disjuctive, Lexicographic, Lexicographic semi-order, Elimination by aspects, Linear Assignment method, Additive weighting, Weighted Product, Nontraditional Capital Investment Criteria, TOPSIS, Distance from Target, AHP, Outranking methods (ELECTRE, PROMETHEE, ORESTE), Multiple Attribute Utility Models, ANP, Data envelopment analysis, Multi-Attribute fuzzy integrals.