LAPORAN
PELATIHAN ITEM REVIEW PROFESI BIDAN GELOMBANG I
Direktorat Akademik
Direktorat Jenderal Pendidikan Tinggi
Kementerian Pendidikan Nasional
Hotel Ambhara Jakarta,
18 – 19 Juni 2011
1. Pendahuluan
Upaya peningkatan sistem ujian pada pendidikan tenaga kesehatan khususnya bidan yang menjadi salah satu fokus Komponen 2 HPEQ Project mensyaratkan adanya suatu proses pembuatan soal ujian yang berkualitas, komprehensif, dan sesuai dengan tingkat kompetensi yang diharapkan. Salah satu metode ujian yang akan digunakan adalah ujian tertulis dengan dukungan teknologi berbasiskan komputer atan disebut juga sebagai computer-based testing
(CBT).
Dalam persiapan ujian CBT ini diperlukan soal yang kredibel, melalui satu proses pembuatan soal sesuai dengan kaidah dan standar. Soal yang telah dibuat harus ditelaah apakah memuat kompetensi esensial dalam pekerjaan dan apakah struktur soal terstandar dengan baik.
Pada tahun 2010 serangkaian workshop item development secara nasional telah dilakukan pada profesi. Soal dari workhsop item development yang telah dikumpulkan sejumlah 222 soal yang memenuhi kriteria soal yang baik, dan setelah dilakukan workshop item review terkumpul soal 119 soal baik. Berikut adalah rekapitulasinya:
NO KOMPONEN TARGET REALISASI
1. Jumlah soal yang direview dalam workshop 200 167 2. Jumlah soal yang memenuhi kriteria soal yang baik 200 119 3. Jumlah institusi yang mengirim peserta dalam
workshop
20 18
4. Jumlah peserta workshop 20 18
Workshop item review ini akan melibatkan para alumni peserta pelatihan item development dan
item review 2010 karena dipandang mampu untuk melakukan review soal sebagai upaya
peningkatan kualitas soal dan peningkatan sumber daya manusia. Dengan demikian maka soal-soal yang dihasilkan dapat dipergunakan dalam pelaksanaan uji kompetensi bidan.
2. Tujuan
Tujuan dilaksanakannya workshop nasional item review ini adalah :
Terkumpulnya 600 soal yang telah direview dan memenuhi syarat untuk digunakan sebagai ujian yang bersifat nasional
3. Output Workshop
Output yang diharapkan dari workshop ini adalah :
600 soal yang telah direview yang memenuhi syarat untuk digunakan sebagai ujian yang bersifat nasional
4. Metode Pelaksanaan Workshop
Workshop nasional item review bidan ini dilaksanakan pada tanggal 18 – 19 Juni 2011 di Hotel Ambhara, Jakarta. Peserta workshop adalah 23 item reviewer dan 4 orang fasilitator.
Pada pelaksanaannya, ketua AIPKIND dan Yetty K Irawan/ Liasion Officer tidak dapat hadir karena sedang ada konfrensi ICM di Afrika. Sedang peserta Evi Hasnita dari Stikes For De Cock berhalangan hadir dan digantikan dengan Devi Sari dari Padang Mercubuana. Dan ada tambahan peserta yang tadinya menggantikan ibu Runjati yang akhirnya datang pada acara, yaitu ibu Sri Ratnawati dari Poltekkes Surabaya. Tut Barkinah dari IBI Banjarmasin digantikan oleh Bu Ani Kusumastuti dari
Poltekkes III Jakarta Fasilitator Gita Nirmala datang terlambat dan di kelompok tersebut dikoordinir sementara oleh peserta, Ibu Yulinda.
Untuk mempermudah proses review soal, para item reviewer dibagi menjadi 4 kelompok. Fasilitator pada workshop ini adalah Ibu Dewi Purwaningsih, Ibu Diana, dan Ibu Tati Rostati dan Ibu Gita Nirmala. Berikut adalah data peserta item review bidan:
No Nama Jabatan dan Institusi HP email
1
Yulinda
Jur. Kebidanan
Poltekkes Bandung
081322257350 yulinda_aja@yahoo.com2
Utinsari
Poltekkes Pontianak
081522570519 sultana68@ymail.com3
Ni Nyoman
Budiani
Poltekkes Denpasar
Bali
08563737097 budiani.n3@gmail.com4
JM Meta
Poltekkes Pekan Baru
0812 73465657 jm_metta@yahoo.com5
Jehanara
Poltekkes Jakarta III
08170851496 khalyn_chandra@yahoo.com6
Siti Mardiyah
Akbid Minasa Upa
Makassar
0181442998 akbidminasaupa@yahoo.co.id7
Willa Follona PP IBI Jakarta
081315266646 frii_welly@yahoo.co.id8
Kasiati
Poltekkes Surabaya
08123095650 jurkeb.poltekesdepkessby@gmail.com
9
Marliana
rahma
Akbid Bandung
089655450766 marliana.rahma@yahoo.com10
Karningsih
Poltekkes Jakarta III
08158862625 karningsihsudiro@yahoo.com11
Tuti Sukaeti
Akbid Budi Kemuliaan
0818710150 tutisukaeti@ymail.com12
Runjati
Poltekkes Semarang
08179542019 runjatia@yahoo.co.id13
Emi Suryani
Poltekkes Solo
08156734507 emyyani@yahoo.com14
Tri Novi
Jur. Kebidanan UB
0811 3030 31 trinovikurnia@yahoo.co.id15
Erlina Nikelas Poltekkes Jambi
0812741948416
Dewi
Purnamawati
STIKes Kharisma
081319400463dpw_80@yahoo.co.id dan purnamawatidewi80@yahoo.com
17
Nuryaqin
Poltekkes Makassar
085299218562 nuryaqin@yahoo..co.id18
Sadjabibi
UNAIR
0813 2046 120 sadjabibiindriani@yahoo.com19
Heny Puji w
Poltekkes Jogyakarta
08122762095 fazlama@yahoo.co.id20
Sri Ratnawati Poltekkes Surabaya
08155080585 ratnawati.inside@yahoo.com21
AniKusumastuti Poltekkes III/IBI Jakarta
22
Lisma EvarenyProdi Kebidanan Bukit Tinggi Poltekkes Padang 082116038327 lismaevareny@yahoo.com
23
Dewi
Purwaningsih
Liassion
Officer/Kebid.Poltekk
es Bandung
0815 6145 817 karienbdg@yahoo.co.id24
Tati Rostati
AIPKIND Bandung
08122324314 rostati_hasan@yahoo.com25
Gita Nirmala
PP IBI Jakarta
08158722324 eltali_friend@yahoo.comApabila dibandingkan dengan rencana kegiatan yang tertera pada TOR, pada implementasinya, acara berjalan agak terlambat dari jadwal dikarenakan waktu mulainya acara sedikit terlambat sekitar 30 menit karena harus menunggu peserta yang terlambat hadir, tetapi meskipun demikian tidak berdampak pada waktu pelaksanaan tiap sesi dari waktu yang dijadwalkan sebelumnya. Meskipun demikian, nilai substansi dari tiap materi yang diberikan oleh narasumber tidak berkurang. Berikut adalah rundown acara workshop pada kondisi riil :
5. Hasil Kegiatan
Workshop ini diawali pengarahan dari sekertaris AIPKIND dan Liasion Officer Bidan HPEQ mengenai hal-hal yang akan dikerjakan selama workshop beserta penentuan target yang akan dicapai. Soal yang akan direview adalah hasil dari pertemuan item development tanggal 11-12 Juni 2011, sejumlah 434 soal dan penambahan kiriman susulan sebanyak 50, sehingga total soal 484. Sedang total soal yang akan direview pada pertemuan ini adalah sebanyak 600 soal. 484 dari soal yang dihasilkan tahun ini dan sisanya adalah soal stock dari tahun 2010. Masing-masing kelompok, reviewer didampingi fasilitator akan mereview soal sebanyak 150 soal.
Setelah pengarahan tujuan dan output pertemuan, pemaparan dan sosialisasi blue print dan hasil kesepakatannya oleh LO komponen 2 bidan, meskipun sebagian peserta adalah peserta lama, namun untuk blueprint yang baru ini perlu terus disosilisasikan. Selanjutnya reviewer diberikan materi mengenai item development dan item review oleh narasumber dari UKDI, Dewi Masyitah.
Sabtu, 18 Juni 2011
Waktu Acara Pelaksana
10.30 - 10.40 Pembukaan dan Pengarahan Tati Rostati/ Sekertaris AIPKIND
10.40 - 11.15 Penjelasan Blueprint Bidan Revisi Dewi Purwaningsih
11.15 – 12.00 Penjelasan dan pengarahan materi item review Narasumber: Dewi Masyitah
12.00 – 13.00 ISHOMA Panitia
13.00 – 17.00 Diskusi dan review soal dibagi menjadi 4 kelompok Fasilitator
17.00 – 19.00 ISHOMA Panitia
19.00 – 22.00 Diskusi dan review soal dibagi menjadi 4 kelompok Fasilitator
Minggu, 19 Juni 2011
Waktu Acara Pelaksana/Fasilitator
08.00 - 12.00 Lanjutan Diskusi dan review soal dibagi menjadi 4 kelompok
Fasilitator
12.00 - 13.00 ISHOMA Panitia
13.00 – 15.00 Lanjutan Diskusi dan review soal dibagi menjadi 4 kelompok
Fasilitator
15.00 - 15.50 Rekapitulasi hasil soal yang telah direview Dewi Purwaningsih/ LO Profesi Bidan Komponen 2 15.50 – 16.00 Wrap up dan Rencana Tindak lanjut Dewi Purwaningsih/ LO Profesi Bidan Komponen 2
Pada tahap review soal, narasumber mengingatkan kembali agar dalam mereview soal para peserta melihat esensi dan relevansi dari soal dengan mengacu pada standar kompetensi Bidan, mengikuti ketujuh tinjauan yang telah disepakati dalam blue print dan juga memperhatikan struktur soal. Koding soal yang disepakati: nama institusi_kelompok/ nomor soal dan jika soal ditolak maka
tulisan diberi warna merah, jika diterima dengan warna biru.
Berdasarkan hasil pertemuan yang telah dilaksanakan selama 2 hari, output dari pertemuan item
review bidan secara kelompol adalah sebagai berikut:
Kelompok 1
No. KOMPONEN TARGET REALISASI
1. Jumlah soal yang direview 150 55
2. Jumlah soal yang diterima (memenuhi kriteria soal yang baik) 150 35
3. Jumlah soal yang ditolak 0 20
4. Jumlah peserta workshop 7
5. Jumlah fasilitator 1 1
Kelompok 2
No. KOMPONEN TARGET REALISASI
1. Jumlah soal yang direview 150 60
2. Jumlah soal yang diterima (memenuhi kriteria soal yang baik) 150 56
3. Jumlah soal yang ditolak 0 4
4. Jumlah peserta workshop 6
5. Jumlah fasilitator 1 1
Kelompok 3
No. KOMPONEN TARGET REALISASI
1. Jumlah soal yang direview 150 60
2. Jumlah soal yang diterima (memenuhi kriteria soal yang baik) 150 38
3. Jumlah soal yang ditolak 0 12
4. Jumlah peserta workshop 6
5. Jumlah fasilitator 1 -
Ditambah dengan 10 soal baru dari reviewer Kelompok 4
No. KOMPONEN TARGET REALISASI
1. Jumlah soal yang direview 150 79
2. Jumlah soal yang diterima (memenuhi kriteria soal yang baik) 150 46
3. Jumlah soal yang ditolak 0 33
4. Jumlah peserta workshop 5
Berdasarkan hasil rekapitulasi di atas output workshop secara umum, dapat disimpulkan bahwa pencapaian target workshop ini sudah optimal. Berikut adalah hasil keseluruhan:
No. KOMPONEN TARGET REALISASI
1. Jumlah soal yang direview 1000 254
2. Jumlah soal yang diterima (memenuhi kriteria soal yang baik) 600 175 (+10 soal baru) = 185
3. Jumlah soal yang ditolak 0 69
4. Jumlah peserta workshop 23 24
5. Jumlah fasilitator 4 3
Berikut adalah tabel target dan pencapaian komponen output pelaksanaan kegiatan secara keseluruhan:
Beberapa faktor mendukung tercapainya target review soal
1. Narasumber dan fasilitator yang sudah memahami materi dengan baik
2. Peserta adalah peserta yang sudah pernah mengikuti item review pada tahun lalu
3. Hanya saja dari hasil yang tercapai, soal paling banyak terkumpul pada area kompetensi 4 dan 5, sehingga masih belum merata
Soal-soal yang telah direview akan dimasukkan ke dalam item bank nasional untuk kemudian dilakukan item analysis untuk mendapatkan 200 soal ujian untuk uji kompetensi bulan September 2011.
Berdasarkan analisa tim monev, pencapaian target jumlah reviewer yang hadir, jumlah soal yang tereview sudah mendekati target yang disepakati bersama.
Berdasarkan kesepakatan tersebut, sebaiknya masing-masing peserta dapat menyusun plan of
mekanisme item development & review yang pada akhirnya berkontribusi pada peningkatan kualitas uji kompetensi bidan dan lulusannya.
6. Refleksi
Setelah dilakukan analisa hasil kegiatan, selanjutnya perlu dilakukan refleksi sebagai bentuk evaluasi pelaksanaan workshop ditinjau dari perspektif peserta, fasilitator, dan tim monev secara umum. Melalui refleksi ini diharapkan akan teridentifikasi root of causes dari kinerja wilayah yang kurang optimal dalam workshop ini. Berikut adalah refleksi pelaksanaan workshop dari beberapa perspektif tersebut :
Gambaran Umum
Secara umum kegiatan berlangsung dengan efektif. Hanya saja peserta merasa diburu-buru karena mengejar target. Variasi soal
Beberapa hal yang perlu diimprove dari pelaksanaan workshop ini adalah : - Pemenuhan soal yang merata untuk paket soal ujian sesuai bluprint
- Soal yang ada kurang variatif dan tidak memenuhi paket soal untuk blurprint
Fasilitator
Secara umum kemampuan peserta cukup baik.
Kendala yang dihadapi (dari sisi peserta):
- Persamaan persepsi dan tata bahasa
- Soal yang tidak relevan dengan standar kompetensi
- Persepsi soal dan tidak mewakili seluruh elemen kompetensi/ blueprint, terfokus pada keterampilan klinis bidan dan landasan ilmiah bidan
- Tidak semua soal menggunakan referensi - Ketidaksesuaian antar vignet dengan option - Option jawaban hanya 4
- Terminologi yang digunakan tidak lazim/ terminologi lokal - Vignette tidak sistematis/ pakem tidak lengkap
- Semua soal yang diterima melalui proses perbaikan baik vignette maupun option
Rekomendasi:
- Sering berlatih di institusi masing-masing sehingga lebih lancar dalam mereview dan orang/ peserta yang hadir/ ikut dalam workhsop tidak diganti
- Banyak melakukan item review dan melaksanakan try out - Strategi harus dimodifikasi
- Kelompok dibagi menjadi 7 kelompok sesuai dengan area kompetensi
- Dalam penyusunan soal (item development) blueprint digunakan sesuai dengan standar kompetensi
- Pembuat soal dan reviewer diberikan kepada peserta sesuai dengan penguasaan materi
Peserta
Kendala yang dihadapi:
- Terjadi kejenuhan karena terburu-buru harus selesai dalam waktu dekat - Perbedaan persepsi dalam review
- Jenis soal yang ada tidak/ perlu dikelompokkan sesuai blueprint - Variasi vignet dan option pada tiap soal
- Tinjauan blueprint tidak diterapkan seluruhnya (distribusinya tidak merata pada beberapa tinjauan)
- Keseragaman dalam menulis vignet
- Kejelasan blueprint sebagai acuan dalam mereview soal masih kurang
- Penggunaan buku sumber utama sebagai acuan dan mereview soal tidak sama
- Variasi dan dinamika pembuat soal yang belum semua sesuai kaidah pembuatan soal yang baik dan aspek blueprint
- Menguasai materi secara luas dan mendalam dari seluruh kompetensi bidan - Soal yang direview banyak yang diganti/ diperbaiki
- Kelompok terlalu besar sehingga diskusi terlalu lama karena banyak pemikiran
Tim Monev : Feedback Peserta
Feedback form didistribusikan oleh tim monev kepada seluruh peserta untuk menjaring “voice of customer” peserta terkait satisfaction level terhadap aspek-aspek pelaksanaan workshop. Dari 23
kuesioner yang kembali ke tim monev, 85% responden menyatakan pelaksanaan workshop sangat memuaskan. Pencapaian yang sangat positif ini merupakan kontribusi dari berbagai pihak, terutama fasilitator, fasilitas workshop, dan pelayanan panitia.
Analisa lebih lanjut terhadap feedback peserta, kepuasan terbesar peserta dirasakan terhadap output workshop, dimana peserta merasa mendapatkan added value yang besar, sehingga workshop ini dinilai dapat meningkatkan kemampuan mereka dalam membuat soal yang baik.
7. Rencana Tindak Lanjut
Berdasarkan analisa output kegiatan, evaluasi pelaksanaan workshop, refleksi dan feedback dari peserta workshop beberapa hal yang dapat direkomendasikan sebagai bentuk improvement dan rencana tidak lanjut untuk menjaga sustainability output dan outcome dari workshop ini adalah sebagai berikut :
- Pada pelaksanaan item development berikutnya sebaiknya peserta sudah diarahkan untuk membuat soal tertentu agar terpenuhi soal paket ujian sesuai blueprint
- Mereview bersama tim di institusi untuk soal yang ada sebagai bentuk latihan sehingga dapat dijadikan soal yang berkualitas
8. Penutup
Persiapan implementasi uji kompetensi untuk profesi Bidan diharapkan dapat diupayakan dengan peningkatan kualitas dan kuantitas pembuatan soal. Dengan demikian, upaya percepatan pembuatan soal yang berkualitas ini dapat berjalan dengan baik dan memiliki dampak yang lebih bermakna. Selain itu proses implementasi CBT akan dapat berjalan sesuai dengan yang telah direncanakan.