Pengukuran LO dan SO
Mervin Hutabarat
Evaluasi dan Asesmen
Program Pendidikan/
Pembelajaran Program
Pendidikan/
Pembelajaran
Asesmen Evaluasi
Pembelajar Hasil/ Capaian
Objectives dan Outcomes
Objectives
• Tujuan – mau ke mana?
• PEO – Program Educational Objective
• Course Objectives
• Learning Objectives
Outcomes
• Hasil - apa yang tampak?
• SO – Student Outcomes (dh.
Program Outcomes)
• Course Outcomes
• Learning Outcomes
Pendahuluan
• Sistem loop tertutup – dengan umpan balik
“Plant”
“Gangguan”
Hasil yang
Diperoleh Rujukan
yang
Diinginkan
Galat
Umpan
Balik
Pendahuluan
Two-Loop EC2000
Program Educational Objectives (PEO)
• Tujuan Program Pendidikan:
Kemana lulusan ditujukan setelah lulus
• Harus diinformasikan kepada publik
Student Outcomes (SO)
• Capaian (terukur) pada Mahasiswa
Kemampuan yang diperoleh saat menyelesaikan program pendidikan
• SO bersama PEO harus diinformasikan pada publik.
Body of Knowledge
• Uraian utuh pengetahuan dan kemampuan yang harus dimiliki lulusan untuk memasuki profesinya
• Merujuk pengetahuan spesifik yang diperlukan
• Bukan taksonomi ilmu pengetahuan
Contoh: S1 Kimia dan S1 Pendidikan Kimia
• Diurai menjadi Knowledge Areas dan Topics
Learning Objectives dan Outcomes
• Topik Pembelajaran dilengkapi Learning Objectives dan Outcomes
• Learning Objectives mencakup
• Uraian materi yang hendak diajarkan
• Urutan proses mencapainya
• Learning Outcomes mencakup
• Target capaian pembelajar (merujuk pada taksonomi Bloom)
• Lama waktu yang diperlukan
Taksonomi Bloom
Revisi Taksonomi Ranah Kognitif
Bentuk Asli Revisi
Mata Kuliah (Course)
• Topik-topik digabung dalam Mata Kuliah Course
• Memperhitungkan waktu belajarnya
• Menetapkan urutan belajarnya
• Deskripsi Topik, Learning Objectives dan Outcomes
• Menghindari duplikasi materi pengajaran
• Menghidari adanya materi yang tak tercakup
• Menghindari pembelajaran tanpa pengetahuan pendukung
Course B
BoK dan Mata Kuliah
Course A
SO
SO1 SO2 SO3 SO4 SO5 SO6 SO7 PEO
PEO1 PEO1 PEO1
LO LO LO
LO LO
LO
LO
LO LO
LO
MK MK1 MK 2 MK 3 MK 4 MK 5 MK 6 MK n
LO
LO LO LO LO
LO
LO
LO LO
LO
LO
LO
LO
LO
LO
Asesmen Student Outcomes
• Dilakukan melalui pengukuran dan evaluasi hasil pengukuran
• Pada mata kuliah dengan sampling populasi
• Disebar dengan berjenjang pada seluruh kuliah wajib
• Dikaitkan dengan pengukuran Learning Outcomes untuk kemudahan
• Dengan cara
• Direct Measurements – pada aktivitas dan hasil kerja pembelajar
• Indirect – persepsi dari kuesioner pembelajar atau pihak lain
Direct and Indirect Measurements
• Survey mahasiswa akan capaiannya dalam perkuliahan (CO)
• Survey wisudawan akan capaian dalam program studinya (SO)
• Survey tenaga perekrut capaian program studi (SO) dan isu lain
• Survey alumni untuk persepsinya posisi terhadap PEO
• Survey employer untuk persepsinya posisi terhadap PEO
Direct and Indirect Measurements
• Alat ukur adalah rubrics yang dikenakan pada karya (tugas, PR, Kuis, Makalah, Ujian dll.) dan aktivitas (praktikum, seminar, dll.) mahasiswa
• Seyogianya dilakukan pada setiap mata kuliah untuk setiap capaian diharapkan mata kuliah
• Sejalan dengan proses penilaian mahasiswa, namun mempunyai tujuan
yang berbeda – rancangan yang baik akan memudahkan pelaksanaan
keduanya secara simultan
Rubrics
• Rujukan pengukuran performansi (alat/ pedoman penilaian) pada populasi dengan uraian kriteria yang tegas
• Rubrics berisi:
• Materi yang harus dikuasai
• Outcomes yang diharapkan sesuai kurikulum
• Pembagian tingkat penguasaan (umumnya 3-5 tingkatan), contoh:
Apprentice, Basic, Learned, Exemplary
• Kriteria capaian dan kekurangan yang terjadi pada tiap tingkat
Penyusunan Rubrik
1.
Rujuk pada Learning Outcomes (LO) yang akan diukur
2.
Tentukan Performance Criteria (PC) dari LO tersebut yang akan diukur
3.Tentukan jumlah kategori (metrik) capaian yang akan dibuat
4.
Tentukan kategori yang dapat diterima sebagai memenuhi target dan berikan uraian hasil/ capaian yang diharapkan
5.
Tentukan uraian capaian yang menunjukkan hasil yang lebih baik dari target
6.
Tentukan uraian capaian yang kurang atau gagal memenuhi target
Rubrik Asesmen
• Menyelaraskan aktivitas dengan tujuan
• Mendefinisikan sasaran yang jelas
• Menawarkan kriteria untuk penilaian isu subyektif
• Membantu pemberian nilai yang adil
• Menilai dengan lebih cepat
• Memberikan umpan balik pada mahasiswa
• Memberi kesempatan
mahasiswa menilai dirinya sendiri
• Memberi kesempatan mahasiswa memperbaiki diri
Mengapa Rubrik?
Jenis Rubrik
• Holistik
• Menilai keseluruhan komponen pekerjaan mahasiswa
• Nilai tunggal (ya/tidak), lebih subyektif namun mudah menilai
• Umumnya untuk menilai program dengan multidimensi
• Tidak berdasarkan artifak nilai
• Penilaian umum pada kelompok
Jenis Rubrik
• Analitik
• Menilai komponen spesifik pekerjaan mahasiswa yang relevan
• Menggunakan tingkatan nilai (umumnya 4 tingkat)
• Memberi penilaian pada hal yang subyektif
• Umumnya untuk mata kuliah
• Menyediakan umpan balik pada mahasiswa
• Tingkat kuliah
• Berbasis pada tugas
• Pengembangan individu atau kelompok
• Mendukung capaian pembelajaran kuliah – asesmen berganda
• Tingkat program
• Tertanam pada kuliah
• Pada artifak yang dipilih acak
• Mendukung capaian pembelajaran program
Tujuan Penggunaan Rubrik
Pertanyaan Kunci
• Tujuan asesmen
• Assessment of learning
• Assessment for learning
• Pembelajaran apa yang akan diukur asesmen
• Proses
• hasil
Langkah Design
• Identifikasi learning outcomes
• Identifikasi tingkat pengetahuan
• Identifikasi kriteria
• Pengelompokan kriteri yang sama
• Identifikasi skala nilai
• Definisi komponen dan skala
• Berbagi dan merevisi
Identifikasi Outcomes
• Tujuan terkait oucomes
• Outcomes yang didukung asesmen
• Tingkat dukungan pada outcomes
Identifikasi Tingkat Pengetahuan
• Tipe pengetahuan
• Faktual: pengetahuan dasar disiplin ilmu
• Konseptual: organisasi, klasifikasi
• Prosedural: langkah proses
• Atitudinal: emosi, kepercayaan
• Psikomotor: aktivitas fisik
• Metakognitif: regulasi diri, persistensi
Identifikasi Kriteria
• Pengelompokan ke dalam 4-8 kategori kriteria
• Komponen utama dalam tugas yang diberikan
Laporan Praktikum Hipotesis Rancangan percobaan Hasil
Kesimpulan Presentasi
Isi
Kreativitas Penggunaan PPT
Kemampuan bicara
Makalah Isi
Pendahuluan- Kesimpulan Panjang
Sitasi
Referensi
• Mengembangkan skala penilaian
• 3-4 tingkat
• Identifikasi kualitas keberhasilan
minimum
• Upayakan selalu positif
• Excellent, Average, Starter
• Fully developed,
Developing, Getting started
• Accomplished, competent,
developing, beginning
• Advance, Proficient, Novice, Beginner
Identifikasi skala nilai
• Menetapkan bobot
• Bila angka diperlukan
• Menolong identifikasi apa yang penting pada tugas
Kategori Bobot Asesmen topik 30
Isi dan diskusi 30 Organisasi dan
struktur
20 Bahasa dan
ejaan 10
Format 10
Identifikasi skala nilai
Berbagi dan Merevisi
• Bagikan dan diskusikan dengan mahasiswa
• Hasil akan meningkat kualitasnya
• Mahasiswa menyediakan waktu dengan baik
• Bagikan dengan sesama dosen
• Menolong mahasiswa memahami
• Apa yang diinginkan dalam tugasnya
• Seperti apa kinerja yang baik
• Apa yang dilakukannya dengan baik
• Apa yang harus dilakukan kemudian
• Menolong dosen
• Merencanakan instruksi
• Menilai dengan konsisten
• Argumentasi yang baik untuk penilaian
• Komunikasi yang baik dengan mahasiswa
Fitur Rubrik yang Baik
Format Rubrik
Kriteria Istimewa Mahir Berkemban g
Pemula Komentar Kategori 1
Kategori 2 Kategori 3 Kategori 4 Kategori 5
Contoh Rubrik
Kriteria Istimewa Mahir Berkemban
g Pemula
Menentukan
Simpul Memberikan
alasan pemilihan
simpul rujukan
Memilih simpul rujukan yang baik
Mengenali seluruh simpul
Mengenali sebagian simpul Menggunakan KCL Menuliskan
KCL dengan sistematis dan konsisten
Menuliskan KCL dengan sistematis
Menuliskan KCL benar
Menuliskan KCL namun ada rujukan salah
Menyusun
Persamaan Linier
Menuliskan dalam bentuk matriks
Menuliskan dalam
bentuk baris
sistematis
Memisahkan variabel dan konstanta lengkap
Memisahkan variabel dan konstanta tidak lengkap
Contoh Rubrik
Kriteria Istimewa Mahir Berkemban g
Pemula Menyelesaikan
persamaan linier Dilengkapi dengan penjelasan tiap
langkah
Dengan eliminas i
testruku r dan benar
Dengan eliminasi tanpa
strukur dan benar
Dengan eliminasi tanpa
strukur dan ada
kesalahan Mengintegrasika
n langkah Semua langkah digunakan dengan benar
dilengkapi dengan penjelasan
Semua langkah digunak an
dengan benar
Menggunaka n semua langkah namun ada kesalahan
Menggunkan hanya
sebagian langkah
