Item Development and Review

(1)

Item Development and Review

Workshop

WORKSHOP NASIONAL

ITEM DEVELOPMENT & REVIEW KEBIDANAN

HPEQ KOMPONEN 2

JW MARIOT MEDAN

(2)

Tahap Penjaminan Mutu UKDI

Input Process Input Process Output 1. Blueprinting 2. Item Writing Standard 3. Item Reviewer 1. Review Process 2. Try-out 3. Examination guideline • Criterion-reference. • Standard 3. Item Reviewer Standard 4. ICT support 4. Report on Examination 5. Feedback process. 6. Item Bank • Standard setting exercise

(3)

ISI

Aspek

Review

(4)

Contoh Kasus 1: isi?

Seorang pria 20 tahun, sehat, sebelumnya masuk perawatan rumah sakit dengan keluhan nyeri mendadak pada dada

rumah sakit dengan keluhan nyeri mendadak pada dada sebelah kiri, ECG normal, foto paru-paru terlihat

pneumotoraks.

Prosedur apa yang akan anda lakukan :

A. Observasi. B. Barium meal. C. Torakotomi. C. Torakotomi. D. Torakostomi. E.Torakostomi + intubasi.

(5)

SKDI

Pneumothoraks (3a dan 3b)

3b. Mampu membuat diagnosis klinik berdasarkan

pemeriksaan fisik dan pemeriksaanpemeriksaan

tambahan yang diminta oleh dokter (misalnya :

pemeriksaan laboratorium sederhana atau X-ray).

Dokter dapat memutuskan dan memberi terapi

pendahuluan, serta merujuk ke spesialis yang relevan

(kasus gawat darurat).

Torakotomi, torakostomi tidak ada dalam list

keterampilan dokter umum.

(6)

Lesson Learnt pada isi

Apakah secara isi, topik soal yang

ditanyakan esensial?

Rujukan: Standard Kompetensi Dokter

Indonesia (SKDI) dan blueprinting UKDI.

(7)

Scanning isi soal terkait topik soal Dikembalikan Dikembalikan

Review

struktur

(8)

Aspek

Vignette

Aspek

Review

Lead in

(9)

Scanning isi soal terkait topik so terkait topik soal Dikembalikan

Review struktur

Vignette

(10)

PENYAMAAN ISTILAH

(11)

Contoh Kasus 2: vignette?

Seorang laki-laki berusia 55 tahun datang dengan nyeri dada kiri yang hebat sejak 2 jam yang lalu saat sedang senam pagi. Nyeri yang hebat sejak 2 jam yang lalu saat sedang senam pagi. Nyeri dirasakan menjalar ke lengan kiri, tidak hilang dengan istirahat. Pasien adalah perokok berat. Kakak tertua meninggal mendadak 2 tahun yang lalu saat latihan tenis.

Apakah pemeriksaan yang paling tepat saudara minta untuk memastikan diagnosis pasien di atas?

A. Foto thorax dan EKG A. Foto thorax dan EKG

B. Echocardiografi dan EKG

C. Echocardiografi dan enzim CPK D. EKG dan enzim CPK

(12)

Komponen Vignette

Jenis

kelamin

, Umur (e.g. laki-laki 45 tahun)

• Kasus spesifik untuk wanita _kehamilan • Kasus anak-anak, dewasa, geriatri?

• Kasus anak-anak, dewasa, geriatri?

Tempat pelayanan/setting (IGD) Keluhan Utama

Durasi

Gejala penyerta dan keterangan pasien lainnya Pemeriksaan fisik

(13)

Lesson learnt pada vignette

Bahasa yang digunakan pada vignette

Vignette terlalu pendek (tidak lengkap), atau

terlalu panjang (tidak terkait logika option).

Urutan vignette tidak sistematik (HT, PD, HT,

PD, PP).

(14)

(15)

Soal baru

Scanning isi soal terkait topik soal

Dikembalikan Tidak esensial Review struktur E se n si a l Vignette Lead-in

(16)

Kasus 3: Lead in?

Seorang perempuan berusia 30 tahun mengeluh ada

benjolan sebesar 1,5 cm dibawah telinga kanan. Keluhan ini benjolan sebesar 1,5 cm dibawah telinga kanan. Keluhan ini dialaminya sejak 4 tahun yang lalu. Pada pemeriksaan status lokalisata diperoleh lesinya padat dan keras, dapat

digerakkan, N.VII, fungsi baik, tidak teraba pembesaran kelenjar getah bening.

Diagnosisnya kasus ini adalah :

A. Kistoadenoma limfomatosum (Warthin tumor).

B. Karsinoma Muko-epidermoid tahap awal.

C.Tumor campur jinak.

D.Tumor campur ganas.

(17)

Menggunakan kata

tanya secara

langsung

, sehingga dapat memenuhi

langsung

, sehingga dapat memenuhi

(18)

(19)

Soal baru

Dikembalikan Tidak esensial Review struktur E se n si a l Vignette Lead-in _Option

(20)

Kasus 4: Option?

Seorang pria berusia 60 tahun dibawa ke bagian gawat darurat oleh seorang polisi, yang menemukannya dalam darurat oleh seorang polisi, yang menemukannya dalam keadaan tergeletak tidak sadarkan diri di sisi jalan. Pada pemeriksaan fisik diagnostik diperoleh saluran pernafasan dalam keadaan tidak tersumbat.

Bagaimanakah langkah pertama pada administrasi intravena?

A. pemeriksaan cairan serebrospinal A. pemeriksaan cairan serebrospinal

B. glukosa dengan vitamin B1 (thiamine) C. CT scan kepala

D. fenitoin E. diazepam

(21)

Lesson learnt pada Option

Homogen: gramatikal, semantik, panjang-pendek.

Hindari absolutisme: selalu, tidak pernah.

Hindari konvergensi.

Hindari kesamaan istilah dengan vignette.

Hindari urutan yang tidak sistematis

_menyulitkan.

Hindari kalimat: bukan salah satu di atas

(22)

Bagan Alir

Proses

Review

Soal baru

Review

Dikembalikan Tidak esensial

Review struktur

E s e n s ia l

Vignette

Lead-in

Option

(23)

(24)

Materi :

• Relevansi: Kongruensi

• Bahasa

• Tingkat kesulitan (tingkat kompetensi)

• Klasifikasi : e.g. Dasar atau klinik?

(25)

Apa saja yang perlu ditelaah?

Struktur :

• Stem

• Lead in

• Option

Kesimpulan

• Komentar umum dan saran

• Diterima/revisi/dikembalikan

(26)

Struktur Soal : Item Flaws

Grammatical Cues ( ) Ya ( ) Tidak

Logical Cues ( ) Ya ( ) Tidak

Istilah yang absolut ( ) Ya ( ) Tidak

Jawaban benar yang panjang ( ) Ya ( ) Tidak

Pengulangan kata dari badan

soal ke jawaban ( ) Ya ( ) Tidak

Konvergensi soal ( ) Ya ( ) Tidak

Pilihan jawaban yang panjang,

(27)

Pilihan yang berupa angka tidak diurut

sesuai dengan besarnya ( ) Ya ( ) Tidak

Pilihan yang mengandung unsur frekuensi

suatu kejadian bersifat multi interpretas ( ) Ya ( ) Tidak suatu kejadian bersifat multi interpretas ( ) Ya ( ) Tidak

Pilihan jawaban tidak paralel dan

urutan tidak logis ( ) Ya ( ) Tidak

Penggunaan BSSD (bukan salah satu

di atas pada pilihan jawaban) ( ) Ya ( ) Tidak Badan soal terlalu panjang, sulit,

Badan soal terlalu panjang, sulit,

(28)

Komentar Umum Reviewer

ID Soal : ID Soal :

Kesimpulan Hasil Review

( ) Diterima tanpa perbaikan ( ) Diterima dengan perbaikan

( ) Perlu konfirmasi pembuat soal ( ) Perlu konfirmasi pembuat soal

( ) Tidak perlu konfirmasi dengan pembuat soal ( ) Dikembalikan kepada pembuat soal

( ) memerlukan perbaikan keseluruhan ( ) Berpotensi diterima dengan perbaikan

(29)

Saran Perbaikan Saran PerbaikanSaran Perbaikan Saran Perbaikan

Tanggal:

(DD) / (MM) / (YY) (DD) / (MM) / (YY)

Nama Jelas :

(30)

Exercise

Seorang mahasiswa pria, 25 tahun datang ke rumah sakit dengan keluhan panas badan sejak 2 minggu yang lalu yang mulai secara gradual dan

berlangsung remiten. BAB mencret lebih kurang 2 kali sehari. Pada

pemeriksaan fisik ditemukan keadaan umum yang sakit sedang, apatis, pemeriksaan fisik ditemukan keadaan umum yang sakit sedang, apatis,

hepatomegali 2 jari dibawah arcus costae. Hb 14,2 gr/dL, leukosit 4200 /mm3, trombosit 172000/mm3.

Pertanyaan: Apa tindakan diagnosis yang akan anda lakukan pada pasien ini? Pilihan jawaban:

A. Pemeriksaan Hemaglutinasi test untuk dengue

B. Pemeriksaan Widal I dan II, Kultur darah dan feses untuk salmonela

C. Pemeriksaan Widal I dan II.

D. Pemeriksaan apus tebal darah untuk malaria/ DDR

(31)

(32)

Exercise

Datang seorang pria 55 tahun membawa hasil pemeriksaan gula darah yang menyatakan bahwa pria tersebut ternyata menderita Diabetes mellitus. Penderita tersebut belum pernah

Diabetes mellitus. Penderita tersebut belum pernah

memeriksakan gula darah sebelumnya. Penderita tidak ada

keluhan mengenai penglihatan kedua matanya. Sebagai dokter umum dengan fasilitas terbatas (tidak didapatkan oftalmoskop), kapan anda merujuk penderita tersebut ke dokter mata :

A. Pada saat penderita tersebut didiagnosa Diabetes mellitus B. Setelah 5 tahun penderita mengidap Diabetes mellitus

B. Setelah 5 tahun penderita mengidap Diabetes mellitus C. Setelah ada keluhan mengenai kedua mata penderita D. Bila kadar gula darah penderita mencapai 500 mg/dl E. Bila didapatkan kekeruhan pada lensa mata penderita

(33)

(34)

Exercise

Seorang laki-laki umur 65 tahun datang ke dokter dengan keluhan nyeri dada kiri sampai ke punggung dan bahu kiri. keluhan nyeri dada kiri sampai ke punggung dan bahu kiri. Pada pemeriksaan nafas dan jari tangan bau rokok : tinggi badan 160 cm, berat badan 60 kg dan tensi darah 200/110. hasil lab. Kadar glukosa normal, total kolesterol 300 mg% HDL 35 mg%, LDL 200 mg%, TG 150 mg%.

Selain obat-obatan untuk penyakitnya, saran apakah yang sebaiknya diberikan kepada penderita di atas?

A.Olahraga teratur dan diet lemak jenuh

B.Berhenti merokok

C.Banyak makan asam lemak tidak jenuh

D.Berhenti merokok dan olahraga teratur

E.Olahraga teratur, banyak makan asam lemak tidak jenuh, berhenti merokok.

(35)

(36)

Alasan penolakan

Isi tidak esensial

Isi terlalu spesialistis.

Isi tidak realistis, terlalu teoritis (status gizi tanpa

tabel tumbuh kembang).

Tidak ada vignette.

Vignette tidak berfungsi.

Option

_{irrelevant difficulties, test wiseness (bila}

tidak dapat direvisi)

(37)

Bekerja dalam kelompok untuk

mereview soal-soal menggunakan

formulir review yang ada.

(38)

(39)

(40)