Evaluasi berbasis kompetensi 4 (1)

(1)

Penilaian Berbasis

Kompetensi

(2)

Penilaian Pencapaian Kompetensi

(PPK)

 _{Pengertian : Proses pengumpulan bukti secara sistematis serta}

pembuatan keputusan tentang perilaku peserta didik berdasarkan standar kompetensi yang telah ditetapkan.

 _{Penilaian Pencapaian kompetensi dilakukan secara menyeluruh}

(3)

Area KOMPETENSI BIDAN :

1. Etik Legal dan Keselamatan Pasien

2. Komunikasi Efektif

3. Pengembangan diri dan profesionalisme

4. Landasan ilmiah praktik kebidanan

5. Keterampilan

Klinis

dalam

Praktik

Kebidanan

(4)

(5)

1. Key Features Test



_{Salah satu bentuk ujian tertulis}_{berdasarkan skenario klinik}

 _{Terdiri dari deskripsi}_{singkat dan jelas dari kasus atau masalah dan}

diikuti dengan beberapa pertanyaan (terbatas)

 _{Pertanyaan berjumlah 2-3 ditujukan pada masalah utama}

 _{Pertanyaan dijawab dengan format jawaban tertulis dan ringkas}  _{Instrumen dipakai untuk menilai level knows dan knows how}

Keuntugan : 1. Lebih valid

2. Objektif dalam memberikan nilai

3. Kasus KF dapat digunakan untuk format MCQ Keterbatasan :

4. Untuk membuat soal ini perlu kerja intensif

(6)

Contoh

Key Features Test

Topik

: Kejang lama pada anak umur 1 tahun

dan membahayakan jiwanya.

KF 1 : Apa kemungkinan diagnosisnya ?

KF 2 : Bagaimana melakukan resusitasi jantung

– pulomonal ?

(7)

Short Case

(Kasus Pendek)



_{Untuk menilai level shows how}

 _{Meggunakan 3-4 pasien asli yang tidak terstandarisasi, penguji 1-2}

Keuntungan :

1. Diuji dengan menggunakan pasien asli

2. Lebih banyak kasus yang bisa diujikan

3. Assessment keterampilan pemeriksaan klinik lebih detail 4. Validitas konstruksi baik

Keterbatasan :

5. Realibilitas antar penguji

(8)

Cheklist Evaluation

• _{Digunakan untuk menilai perilaku utama aktifitas, atau}

langkah-langkah untuk mencapai kompetensi.

• _{Opsi respon adalah check (v) atau “ya” untuk menunjukkan bahwa}

perilaku/tindakan dilakukan dengan benar

• _{Cheklist umumnya menggunakan skala likert}

• _{Cheklist hanya memberikan informasi mengenai tindakan tetapi}

tidak menunjukkan kekuatan dalam tindakan sehingga perlu dibuat standar /kriteria untuk menentukan tindakan tersebut lulus/ tidak atau baik, sangat baik.

• _{Chekslist terbukti berguna untuk evaluasi} _{patient care skill}

(anamnesis, pemeriksaan fisik, prosedur tindakan)

• _{Berguna pada umpan balik terhadap tindakan, karena cheklist}

dibuat untuk menilai perilaku yang detail dari suatu tugas.

(9)

Evaluasi 360- Derajat

• _Adalah_{penilaian yang dilakukan oleh beberapa orang sesuai}

dengan sudut pandangnya masing-masing terhadao seseorang yang diuji

• _{Tujuan : menilai kinerja individu dan memberikan umpan balik}

• _{Yang menjadi elevator : atasan, rekan kerja, bawahan dan pasien}

atau dosen, staf kependidikan, user, mahasiswa lain.

• _Dapat_{menilai kemampuan interpersonal dan komunikasi, perilaku}

profesional

(10)

Mini CEX

(Mini Clinical Evaluation Exercise)

• _{Adalah metode evaluasi} _{untuk menilai keterampilan klinis secara}

bersamaan sekaligus untuk umpan balik, penilaian formatif

• _{Meningkatkan kinerja peserta didik}

• _{Penilai melihat kinerja peserta didik dalam}_{memeriksa pasien yang}

sebelumya telah ditentukan

• _{Peserta didik melakukan anamnesis lengkap dan pemeriksaan}

fisik, dilanjutkan dengan diagnosis dan terapi, selanjutnya menulis hasil temuanya secara tertulis

• _{Durasi 2 jam}

• _{Menggunakan pasien yang sesungguhnya} • _{Ada umpan balik diakhir penilaian}

(11)

OSCE

(Objecive Structured Clinical Examination)

• _Adalah_{penilaian satu atau beberapa keterampilan klinis yang}

dibagi dalam beberapa pos penilaian

• _{Melihat cara anamnesis, pemeriksaan fisik, keterampilan klinis,}

komunikasi, pengetahauan, merangkum hasil temuan, membuat diagnostik, perencanaan

• _Terdapat_{12-20 pos penilaian dengan masing – masing terdapat}

pasien terstandar, manekin, atau alat-alat

• _{Setiap pos berlangsung 10-15 menit, semua peserta berpindah}

dari pos ke pos dalam urutan dan waktu yang bersamaan

• _Terdapat_{skenario kasus untuk menilai keterampilan}

• _{Peserta didik dapat memperoleh wawasan tentang kompetensi}

(12)

Persiapan pelaksanaan OSCE

• _{Isi Ujian : Bluprint, pemilihan soal, penentuan isi ujian} • _{Standard Setting : penentuan batas lulus}

• _{Standard patients : pemilihan, pelatihan}

• _{Logistik : tempat ujian, jumlah putaran yang diperlukan, staf}

pendukung, alat

• _{Penguji/observer : pemilihan, pelatihan}

• _{Anggaran : administrasi, penguji, penulis soal, konsumsi, alat}

Review Pasca Ujian :

• _{Umpan Balik isi ujian dan proses dari : kandidat, penguji, staf}

administrasi

• _{Batas lulus}

(13)

Contoh soal :

• _{Ibu X datang ke tempat praktek anda dengan keluhan sakit asma}

kumat sejak dua hari. Ibu X telah menggunakan salbutamol dengan inhaler. Hal tersebut biasanya membantu ibu X ingin tahu, apakah mungkin penggunaan inhaler kurang memadai dan menyebabkan keluhannya belum membaik. Ibu X ingin meminta anda menerangkan kembali cara menggunakan inhaler.

• _{Dalam 5 MENIT berikut JELASKAN langkah-langkah yang harus}

(14)

Rechecking & Staff Briefing

• _{Video: 1:23 - 1:36,}

(15)

Student preparation: Isolation

room

• _{Video : 6 : 00 – 6:56, 7:}

(16)

First step: Read the instruction

• _{Video : 07:58 – 8: 50,}

(17)

History Taking Station

• _{Video : 33:18 – 38:50,}

(18)

Procedural skills station: Lab.

skills

(19)

(20)

Procedural skills

• _{Video: 25:00 – 25:05,}

(21)

(22)

Summing the scores

(23)

Results Evaluation

• _{Video : 44:50 – 47:15,}

(24)

Results ?

(25)

Multiple Choice Question

(26)

Why… One Best Answer

• _{Jenis soal 1-2-3-4 lebih mudah ditebak}

• _{Soal sebab akibat sering membingungkan,}

aspek bahasanya terlalu rumit

• _{Satu pilihan terbaik, mencerminkan peran}

(27)

Membuat Soal MCQ

UNTUK LEVEL TINGGI

(PROVINSI/NASIONAL)

• _{Tidak semudah yang dibayangkan}

• _{Kedalaman, aplikasi, berpikir kritis sesuai}

kompetensi

• _{Perlu sounding multidiscipline team}

• _{Perlu ketetapan istilah bersama}

(28)

Ciri Soal Kelas Tinggi

Bukan soal ingatan sederhana (recall)

Menggabungkan berbagai data

Menggambarkan situasi nyata praktek

(pekerjaan)

(29)

Taxonomy Cognitive Bloom:

C1.

C2 C. 3

C1

Mengetahui (menyebutkan)

Pengethuan umum, konsep umum,

nilai/fakta

C2

Memahami (menjelaskan)

Interprestasi chart, grafik, nilai, justifikasi

Urutan prosedur

C3

Menerapkan (menghubungkan)

Aplikasi konsep dlm situasi baru, aplikasi

prosedur, memecahkan hitungan

(30)

Bloom …

C4

Menganalisa (membandingkan)

Menggunakan logika untuk pemecahan

masalah, mengevaluasi relevansi data

C5

Mensintesa (menyimpulkan, menyusun)

mengungkap sebuah konsepsi dengan

baik, merumuskan konsepsi baru,

C6

Mengevaluasi (mengkritik, SOAP)

(31)

RANAH KOGNITIF dlm UJIAN

Penggabungan:

• _{Pengetahuan komprehensif (C1-C2)}

(nilai normal, definisi, konsep, dasar patofisiologi, dll)

• _{Aplikasi klinis (C3)}

(ilmu terapan, diagram masalah, tindakan, tetesan,

dosis)

• _{Berpikir kritis (C4-C6)}

(menegakan masalah, prioritas, analisa hubungan,

prediksi, evaluasi perkembangan, dll)

• _{Afektif (A1-A5)}

(32)

Tahap Telaah soal (Review)

Apakah isi soal

Essensial

dlm pekerjaan

Apakah isi soal

Essensial

dlm pekerjaan

Apakah

struktur

soal

terstandar

baik

Apakah

struktur

soal

terstandar

baik

(33)

I S I

• _{Apakah secara isi, topik soal yang ditanyakan}

esensial

dalam

menjalankan pekerjaan ?

(34)

Struktur Soal

Vignette/kasus/pernyataan

Pertanyaan

(35)

Vignete

Bisa Berisi:

• _Pernyataan

• _Situasi

• _{Kasus pasien}

Ketentuan:

• _Logis

• _Sistematis

(36)

Vignette / kasus / stem (klinis)

• _{Jenis kelamin, Umur (e.g. laki-laki 25 tahun)}

–

_{Kasus spesifik wanita}

_

_kehamilan

–

_{Kasus anak-anak, dewasa, geriatri?}

• _{Tempat pelayanan/setting (IGD, poli, puskesmas)}

• _{Keluhan Utama}

• _{Lama atau derajat keluhan}

• _{Gejala penyerta dan keterangan lainnya}

• _{Pemeriksaan fisik}

(37)

Jenis Soal

• _{Berupa soal pilihan berganda dengan lima}

pilihan jawaban soal.

• _{Soal terdiri dari}

_stem

_{soal yang berbentuk}

skenario (

vignette)

, pertanyaan, dan lima

pilihan jawaban dengan satu jawaban

benar.

• _{Untuk memudahkan penulisan soal, pada}

(38)

Kadiah Umum

• _{Yakinkan bahwa setiap soal dapat diduga}

jenis jawabannya tanpa harus melihat

pilihan jawaban atau yakinkan bahwa

pilihan jawaban adalah 100 % benar atau

salah.

• _{Usahakan agar data atau informasi penting}

seoptimal mungkin dicantumkan pada soal

(

stem

), sedangkan pilihan jawaban

(39)

lanjutan

• _{Hindari informasi berlebihan pada soal}

• _{Hindari soal-soal yang bersifat menjebak}

dan terlalu kompleks serta tidak relevan.

• _{Gunakan pilihan jawaban yang secara}

gramatikal konsisten dan secara logis

kompatibel dengan soal.

• _{Hindari kata-kata absolut seperti, selalu,}

tidak pernah, dan semua pada pilihan

jawaban, dan hindari pula istilah yang tidak

jelas (meragukan) seperti biasanya atau

(40)

lanjutan

• _{Hindari kalimat atau frase negatif seperti}

KECUALI, TIDAK, atau BUKAN.

• _{Fokuskan soal pada konsep-konsep penting,}

dan hindari hanya menguji kemampuan

mengingat fakta

• _{Fokuskan soal-soal pada konsep penting dan}

(41)

lanjutan

• _{Setiap soal diusahakan agar menilai aplikasi}

pengetahuan, tidak hanya menguji daya ingat

terhadap fakta terisolasi

• _{Setiap soal tidak terlalu menekankan aspek}

klinik yang subspesialis

• _{Setiap soal lebih baik menekankan pada}

(42)

lanjutan

• _{Setiap soal dibuat pada satu lembar formulir,}

jika soal dalam bentuk berangkai maka

masing-masing kasus dicantumkan pada

setiap formulir.

• _{Setiap soal mencantumkan tinjauan yang}

(43)

Kesalahan struktur soal

• _{suatu keadaan di mana peserta ujian dapat}

menjawab satu soal bukan karena

penguasaannya terhadap isi materi yang

(44)

• _{irrelevant difficulty}

_”

berkaitan dengan kesulitan yang dihadapi

peserta ujian untuk menjawab suatu soal,

bukan karena sulitnya materi yang diujikan,

namun lebih ke arah sulitnya mahasiswa

(45)

Kesalahan yang berkaitan dengan

testwiseness

:

• _{Grammatical Cues}

• _{Logical Cues}

• _{Istilah yang absolut}

• _{Jawaban benar yang panjang}

• _{Pengulangan kata dari badan soal ke}

jawaban

(46)

Kesalahan yang berkaitan dengan

kesulitan yang tidak perlu/relevan

• _{Pilihan jawaban yang panjang, kompleks,}

atau duplikasi

• _{Pilihan yang berupa angka tidak diurut}

sesuai dengan besarnya

• _{Pilihan yang mengandung unsur frekuensi}

(47)

lanjutan

• _{Pilihan jawaban tidak parallel dan urutan tidak}

logis

• _{Penggunaan BSSD (bukan salah satu diatas)}

pada pilihan jawaban

• _{Badan soal terlalu panjang, sulit, dan}

(48)

Kaidah Penulisan

Stem

• _{Skenario klinik (}

_{”vignette”}

_{) terdiri dari}

deskripsi data pasien dan skenario kliniknya

dengan beberapa atau seluruh informasi di

bawah ini:

–

_Umur

_dan

_{jenis kelamin}

–

_{Tempat perawatan}

_{(contoh, Unit Emergensi)}

–

_{Keluhan utama}

(49)

Lanjutan

–

_{Riwayat pasien lainnya yang berhubungan}

dengan keluhan

–

_{Temuan Pemeriksaan Fisik}

–

_{Hasil-hasil pemeriksaan investigasi diagnostik}

–

_{Hasil-hasil terapi sebelumnya, atau penemuan}

(50)

Penulisan

Lead In

Berbagai contoh Jenis Pertanyaan

• Memperkirakan obat yang dikonsumsi

• Memperkirakan paparan zat beracun

• Memperkirakan jenis diet

• Memperkirakan mood

• Memprediksi hasil pemeriksaan fisik

• Memprediksi hasil lab

• Memprediksi sekuel yang timbul

• Mengidentifikasi penyebab/diagnosis

(51)

Lead in (pertanyaan)

• _{Kata tanya di depan (apakah, manakah, dll)}

• _{Diakhiri dengan tanda tanya (?)}

• _{Terpisah satu baris dari kasus (vignette) agar}

(52)

Kaidah Penulisan Opsi

• _{Opsi yang salah disebut distraktor.}

• _Opsi

_{sebaiknya terdiri dari pilihan dengan}

masalah yang homogen

(semuanya

merupakan diagnosis, langkah – langkah

penanganan pasien, dan lain - lain).

• _{Berbeda dari jawaban yang benar}

• _{Merupakan opsi yang masuk akal dan}

(53)

UTS

Membuat bentuk evaluasi berupa : 1.MCQ (Multiple Choice Question)

1 buah masing-masing mahasiswa, topik kebidanan (ABSEN 1-4)

2. Key Features Test