PELATIHAN
ITEM REVIEW
LAPORAN
ITEM REVIEW
PROFESI
Ners
GELOMBANG I
Direktorat Akademik
Direktorat Jenderal Pendidikan Tinggi Kementerian Pendidikan Nasional
Hotel Ambhara Jakarta,
18 – 19 Juni 2011
WORKSHOP KOMPONEN 2 – JUNI 2011 Page 2
Workshop Nasional
Item Development
Ners
Gelombang 1 Tahun 2011
Komponen 2 - Health Professional Education Quality (HPEQ Project)
sub komponen 2.2 Memperbaiki Metodologi Ujian Berbasis Standar Nasional
Jakarta, 18 – 19 Juni 2011
I. Pendahuluan
Upaya peningkatan sistem ujian pada pendidikan tenaga kesehatan khususnya ners yang menjadi salah satu fokus komponen 2 proyek HPEQ, yaitu proses pembuatan soal ujian yang berkualitas, komprehensif, dan sesuai dengan tingkat kompetensi yang diharapkan. Lebih spesifik lagi, hal ini sejalan dengan fokus komponen 2.2, yaitu memperbaiki metodologi dan manajemen ujian berbasis nasional. Salah satu metode ujian yang akan digunakan adalah ujian tertulis dengan dukungan teknologi berbasiskan komputer atan disebut juga sebagai
computer-based testing (CBT). Untuk itu maka diperlukan suatu upaya untuk membuat suatu bank soal yang sangat kredibel baik dari segi sistemnya maupun soal – soal yang terkandung di dalamnya.
Serangkaian workshop item development nasional untuk profesi ners sebelumnya pernah dilakukan dalam 4 gelombang selama tahun 2010. Berikut adalah hasil dari serangkaian workshop item development tahun 2010:
N o KOMPONEN Gelombang 1 Gelombang 2 Gelombang 3 Gelombang 4 Total (Reali sasi) Tar get Reali sasi Tar get Reali sasi Tar get Reali sasi Tar get Reali sasi 1
Jumlah soal yang terkumpul
dalam Workshop 82 88 480 365 840 709 120 421 1583
2
Jumlah soal yang direview
dalam Workshop* 0 44 160 87 168 176 120 89 396
3
Jumlah soal yang memenuhi
kriteria soal yang baik 0 36 300 100 168 176 120 88 400
4
Jumlah institusi yang
berkontribusi mengirim soal* 41 41 38 32 0 0 39 32 105
5 Jumlah peserta (item writer) 40 41 38 32 56 56 39 39 68
Dalam rangka mempercepat pencapaian KPI komponen 2, terutama dalam hal implementasi CBT yang semula ditargetkan untuk diimplementasikan pada tahun 2014, maka proyek HPEQ memfasilitasi pelatihan untuk item development untuk profesi ners pada tahun 2011.
II. Tujuan
Terkumpulnya 585 soal uji tulis ners yang berkualitas baik III. Luaran
585 soal uji tulis ners yang berkualitas baik IV. Waktu dan Tempat
Kegiatan workshop penyusunan item development ini akan dilaksanakan pada: Hari /tanggal : Sabtu – Minggu, 18 – 19 Juni 2011
Waktu : Sabtu, 18 Juni 2011, pkl 14.00 - 22 .00 WIB Minggu, 19 Juni 2011, pkl 08.00 - 12.00 WIB Tempat : Jakarta
V. Susunan Acara Workshop
Sabtu, 18 Juni 2011
14.00 - 14.30 Pembukaan & Pengarahan Workshop -I Made Kariasa/ LO Profesi
Ners Komponen 2 -Masfuri/ LO Profesi Ners
Komponen 2 14.30 - 15.00 Pemahaman blue print dan sosialisasi hasil kesepakatan
tentang blue print
Fasilitator 15.00 - 16.00 Penjelasan item development dan review Fasilitator 16.00 - 16.15 Coffee Break
16.15 - 18.00 Latihan pembuatan soaldalam 4 kelompok Fasilitator 19.30 - 22.00 Lanjutan latihan pembuatan soal dalam kelompok dan
Perbaikan soal (mandiri: dari soal masing – masing)
Fasilitator
Minggu, 19 Juni 2011
Waktu Acara Pelaksana/Fasilitator
08.00 - 11.00 Lanjutan latihan pembuatan soal dalam kelompok Fasilitator
11.00 - 11.30 Penghitungan jumlah soal yang terkumpul -I Made Kariasa/ LO Profesi
Ners Komponen 2 -Masfuri/ LO Profesi Ners
Komponen 2
11.30 - 12.00 Wrap up dan Rencana Tindak lanjut -I Made Kariasa/ LO Profesi
Ners Komponen 2 -Masfuri/ LO Profesi Ners
WORKSHOP KOMPONEN 2 – JUNI 2011 Page 4 VII. Syarat Peserta Workshop
1. Staf dosen dan instruktur klinik minimal berpendidikan parawat dan berpengalaman 5 tahun
2. Memahami standar kompetensi pendidikan ners dan standar kompetensi ners (PPNI) 3. Menyerahkan soal minimal 20 soal (soal dalam bentuk berkualitas baik), satu hari sebelum workshop dan dikirim melalui email LO komponen 2 ners, yaitu Bapak I Made Kariasa di alamat email [email protected] dan Bapak Masfuri di alamat email [email protected]
4. Buatlah soal sesuai bidang keahlian saudara dan soal pada level ners
VIII. Materi
- Buku referensi yang sesuai
- Standar kompetensi dan standar pendidikan ners - Format pembuatan soal (terlampir)
IX. Output Kegiatan
Tujuan dari workshop kali ini adalah mencapai target soal yang dinyatakan baik sesuai dengan yang telah ditargetkan dari workshop sebelumnya. Peserta yang diundang dalam workshop kali ini ditentukan secara proporsional sesuai dengan peminatan (keahlian peserta) dengan memperhatikan kebutuhan soal. Selain tercapainya jumlah soal yang ditargetkan, pada pelatihan ini peserta yang hadir diharapkan dapat menjadi item reviewer nasional. Pada saat pembukaan, peserta mendiskusikan mekanisme review soal yang telah dibawa oleh semua peserta untuk meningkatkan efektivitas kinerja.
SISTEMATIKA
1. dari 40 peserta dikelompokkan menjadi 4 kelompok besar
2. kemudian di tiap kelompok besar tersebut melakukan refreshing dengan cara mereview secara bersama2 (2 soal)
3. setelah ingat kembali, maka dari setiap 10 orang dibagi menjadi 3 kelompok kecil untuk meningkatkan efektivitas dan mempercepat pengumpulan soal.
Target pencapaian soal menurut expertise
Peminatan Target Maternitas 60 Anak 60 KMB 180 Jiwa 60 Keluarga 60 Gerontik 36 Manajemen 60 Gadar 48 Komunitas 36 TOTAL 600
Pembuatan soal selain mengacu pada peminatan tersebut juga memperhatikan 7 tinjauan sehingga soal sesuai dengan blueprint. Pembuatan soal yang sesuai dengan blueprint dapat dieview untuk menentukan apakah soal tersebut baik atau tidak.
WORKSHOP KOMPONEN 2 – JUNI 2011 Page 6 Tinjauan 1 Aspek etik, legal dan peka budaya
Perawatan dan manajemen asuhan keperawatan Pengembangan professional
Tinjauan 2 K ognitif: pengetahuan comprehensif / berpikir kritis
Pengetahuan aplikasi prosedural (Pengetahuan afektif (konatif) Tinjauan 3 Sistem Kardiovaskuler / Sistem Respirasi / Sistem Imuno-hematologi /
Sistem Neurobehaviour / Sistem Endokrin / Sistem Pencernaan / Sistem Muskuloskeletal / Sistem Integument / Sistem Perkemihan / Sistem Reproduksi
Tinjauan 4 Oksigen / Cairan &.elektrolit / Nutrisi / Eliminasi / Rekreasi / Aman &.nyaman / Stress.&.adaptasi / Seksual /Value.&.belief / Psikososial Tinjauan 5 Promotif / Preventif / Kuratif / Rehabilitatif
Tinjauan 6 Pengkajian / Penentuan diagnosis / Perencanaan / Implementasi / Evaluasi
/ Lain-lain
Tinjauan 7 Maternitas / Anak / KMB/ Gadar / Jiwa / Keluarga/Komunitas/ Gerontik / Manajemen
Pada akhir pelatihan telah terkumpul 574 soal sesuai dengan tabel rekapitulasi sebagai berikut:
Nama Peserta Asal institusi Peminatan
Jumlah soal yang dibawa Jumlah soal yang direview Jumlah soal yang dinyatak an baik Kurnia Yuli Astuti PPNI Jawa Tengah Maternitas/Man
ajemen 22 22 20
Anto Indriyadi PPNI Jawa Tengah Gawat Darurat
(GADAR) 20 20 20
Heru Supriyanto PPNI Jawa Tengah KMB 20 20 20
Wawan Arif Sawana PPNI Bandung KMB 20 20 19
Edy Soesanto PPNI Jawa Tengah Komunitas 20 20 20
Ida Subardiah PPNI Lampung Anak 20 20 20
Enie Noviestari FIK UI/Jakarta
Astuti Yuni Nursasi FIK UI/Jakarta Kep. Keluarga 20 20 20 Hayuni Rahmah FIK UI/Jakarta Kep. Maternitas 23 23 20 Irna Nursanti UMJ/Jakarta Kep. Maternitas 20 20 20
Yakobus Siswandi UPH/Tangerang KMB 20 15 15
Fransiska Maria UPH/Tangerang Kep. Mental 20 20 20 Syamsul Anwar UMJ/Jakarta Kep. Komunitas 20 20 20
Yani Sofiani UMJ/Jakarta KMB 20 20 20
Sri suprapti RSCM/Jakarta Gawat Darurat
(GADAR) 18 16 16 Welas Riyanto RS Fatmawati/Jakart a Gawat Darurat (GADAR) 20 14 14
Jayakarta/Jakarta Lulu Lusyana RS.Harapan
Kita/Jakarta
KMB/GADAR
20 20 20
Aam Sumadi RS Haji Jakarta KMB 20 15 15
Asnet L.B STIK St.
Carolus/Jakarta
KMB
20 15 15
Rika Sabri PSIK
Unand/Padang
Komunitas
20 20 20
Erwin Univ. Riau/Riau
Mariyono Sedyo Winarso PSIK FK UGM/Jogjakarta Jiwa 7 20 20
Yuni Sufyanti Arief FKp
UNAIR/Surabaya Kep. Anak 20 20 20 Ismonah STIKes Telogorejo/Semar ang KMB 20 20 20
Agus Santoso FIK
UNDIP/Semarang
Manajemen
51 18 18
Yanti Hermayanti Fkep
Unpad/Bandung
I Ketut Suardana PSIK
Udayana/Denpas ar Manajemen 27 17 17 I dewa Putu Putrayasa Poltekkes Denpasar/Bali KMB 20 20 20 Ni Wayan Suniya dewi STIKes Wira Medika PPNI Bali
KMB
20 20 20
Hansen STIKes Papua Sorong/Papua Misroh Mulianingsih STIKes Yarsi Mataram Maternitas 20 20 20
Yustan Azidin STIKes
Muh.Banjarmasin
Kep. Gawat
Darurat 20 10 10
Alia Andriany STIKes Graha Edukasi/Makassar
Kep. Medikal
Bedah 20 12 12
Takdir Tahir UNHAS/Makassar KMB/Dasar 20 20 20
Kumboyono UB/Malang Komunitas 23 23 23
Syariyah Rauzatul Jannah UNSYIAH./Banda Aceh Ihsan USU/Medan Fitri UGM/Jogjakarta
Aulawi Khudazi PSIK FK
UGM/Jogjakarta
fasilitator
- - -
Tuti Herawati PPNI/Jakarta KBM/GADAR
fasilitator - - -
Mustikasari PPNI/Jakarta fasilitator - - -
Masfuri Liassion Officer Ners Komp.2/ Jakarta
fasilitator
WORKSHOP KOMPONEN 2 – JUNI 2011 Page 8 I Made Kariasa Liassion Officer
Ners Komp.2/ Jakarta
fasilitator
- - -
TOTAL
Rekapitulasi soal yang terkumpul menurut peminatan
Peminatan Target Pencapaian Kelp 1 Fasilitator: Aulawi K. Pencapaian Kelp 1 Fasilitator: Tuti H. Pencapaian Kelp 1 Fasilitator: Made Pencapaian Kelp 1 Fasilitator: Masfuri Maternitas 60 80 - - - Anak 60 40 - - - KMB 180 - - - 216 Jiwa 60 - - 40 - Keluarga 60 - - 48 - Gerontik 36 - - 25 - Manajemen 60 - 35 - - Gadar 48 - 60 - - Komunitas 36 - - 30 - TOTAL 600 120 95 143 216
TOTAL SOAL YANG TERKUMPUL DAN DINYATAKAN BAIK: 574
X. Refleksi
Bila dibandingkan dengan target jumlah soal yang harus dicapai, yaitu 585 soal, secara kuantitatif belum terpenuhi. Akan tetapi mengingat jumlah peserta tidak semuanya hadir sesuai undangan maka jumlah soal yang terkumpul tersebut sudah baik. Jika 8 orang yang tidak hadir dapat mengumpulkan setidaknya 15 soal yang baik maka target tersebut akan tercapai. Oleh karena itu secara umum pelaksanaan workshop kali ini telah sesuai dengan target yang diharapkan.
Tim Monev telah mengumpulkan persepsi peserta dan narasumber terkait dengan pelaksanaan workshop. Persepsi peserta digambarkan dalam grafik sebagai berikut:
Berdasarkan grafik tersebut dapat diketahui aspek
dinilai paling sesuai. Peserta mengikuti kegiatan ini dengan baik dari awal sampai akhir. Peserta juga menganggap pelatihan ini sangat bermafaat untuk meningkatkan kualitas peserta sebagai item reviewer sekaligus bermanfaat da
ners.
Beberapa hal yang perlu ditingkatkan menurut grafik tersebut adalah aspek nomor 2 dan 5. Yaitu mengenai persiapan peserta untuk mengikuti pelatihan ini dan aspek kualitas soal yang dibawa peserta (yang direview). Hal
mengenai performance peserta.
Beberapa peserta juga belum membawa soal sejumlah yang diharapkan (20 soal per peserta). Mengingat workshop item development
dibuat sistem yang bak untuk menjaga kepatuhan para peserta dalam mengumpulkan soal secara kontinyu, diantaranya melalui sistem reward dan punishment.
Aspek 5: Berdasarkan soal
menunjukkan kemampuan yang baik. Aspek tersebut dinilai belum optimal, padahal para peserta yang diundang kali ini adalah peserta yang telah mengikuti workshop sebelumnya. Sehingga perlu dievaluasi penyebab soal masih dinilai belum b
mendukung perbaikan aspek tersebut adalah dengan menyusun buku panduan pembuatan soal (misalnya oleh AIPNI) dan pelatihan yang kontinyu oleh AIPNI agar peserta semakin terlatih. Selain itu menurut tim Monev, hal ini juga berkaitan
000 28 tidak sesuai kurang sesuai sesuai paling sesuai
Berdasarkan grafik tersebut dapat diketahui aspek-aspek yang menurut persepsi peserta dinilai paling sesuai. Peserta mengikuti kegiatan ini dengan baik dari awal sampai akhir. Peserta juga menganggap pelatihan ini sangat bermafaat untuk meningkatkan kualitas peserta sebagai item reviewer sekaligus bermanfaat dalam pengembangan uji kompetensi
Beberapa hal yang perlu ditingkatkan menurut grafik tersebut adalah aspek nomor 2 dan 5. Yaitu mengenai persiapan peserta untuk mengikuti pelatihan ini dan aspek kualitas soal yang dibawa peserta (yang direview). Hal tersebut konsisten dengan penilaian narasumber mengenai performance peserta. Beberapa peserta belum membawa soal untuk direview. Beberapa peserta juga belum membawa soal sejumlah yang diharapkan (20 soal per peserta). Mengingat workshop item development ini menjadi pelatihan yang terakhir, maka perlu dibuat sistem yang bak untuk menjaga kepatuhan para peserta dalam mengumpulkan soal secara kontinyu, diantaranya melalui sistem reward dan punishment.
Berdasarkan soal-soal yang telah saya review, para pembuat soal telah menunjukkan kemampuan yang baik. Aspek tersebut dinilai belum optimal, padahal para peserta yang diundang kali ini adalah peserta yang telah mengikuti workshop sebelumnya. Sehingga perlu dievaluasi penyebab soal masih dinilai belum baik. Beberapa usulan yang mendukung perbaikan aspek tersebut adalah dengan menyusun buku panduan pembuatan soal (misalnya oleh AIPNI) dan pelatihan yang kontinyu oleh AIPNI agar peserta semakin terlatih. Selain itu menurut tim Monev, hal ini juga berkaitan dengan belum terjadi sharing
01 00 01 02 00 00 00 12 5 3 19 5 8 1 28 15 23 24 7 22 20 27
REKAP FEEDBACK ITEM BANK DEVELOPMENT NERS Jakarta, 18 - 19 Juni 2011
yang menurut persepsi peserta dinilai paling sesuai. Peserta mengikuti kegiatan ini dengan baik dari awal sampai akhir. Peserta juga menganggap pelatihan ini sangat bermafaat untuk meningkatkan kualitas lam pengembangan uji kompetensi
Beberapa hal yang perlu ditingkatkan menurut grafik tersebut adalah aspek nomor 2 dan 5. Yaitu mengenai persiapan peserta untuk mengikuti pelatihan ini dan aspek kualitas soal yang tersebut konsisten dengan penilaian narasumber Beberapa peserta belum membawa soal untuk direview. Beberapa peserta juga belum membawa soal sejumlah yang diharapkan (20 soal per peserta). ini menjadi pelatihan yang terakhir, maka perlu dibuat sistem yang bak untuk menjaga kepatuhan para peserta dalam mengumpulkan soal
ara pembuat soal telah menunjukkan kemampuan yang baik. Aspek tersebut dinilai belum optimal, padahal para peserta yang diundang kali ini adalah peserta yang telah mengikuti workshop sebelumnya. aik. Beberapa usulan yang mendukung perbaikan aspek tersebut adalah dengan menyusun buku panduan pembuatan soal (misalnya oleh AIPNI) dan pelatihan yang kontinyu oleh AIPNI agar peserta semakin dengan belum terjadi sharing
01 01 4 6 27 23 21 DEVELOPMENT NERS
WORKSHOP KOMPONEN 2 – JUNI 2011 Page 10
Harapannya soal yang dikumpulkan oleh peserta di awal pelatihan adalah soal yang telah direview di tingkat institusi sehingga kualitas soal lebih baik.
Beberapa usulan yang disampaikan narasumber untuk peningkatan kualitas item development adalah sebagai berikut:
- Sosialisasi rencana uji kompetensi tahun 2012 ke STIKES dan Akper
- Sosialisasi model soal dan pembuatan ke direktur/pimpinan institusi di seluruh Indonesia
- Membuat buku panduan pembuatan soal
- Usulan untuk AIPNI: membuat workshop item development untuk mensosialisasikan proses/sistem uji kompetensi. Mewajibkan/menugaskan beberapa institusi untuk mengembangkan soal uji kompetensi. Integrasi dengan semua stakeholder untuk persiapan dan penyelenggaraan uji kompetensi perawat.
Peserta juga memahami perlunya diseminasi pengetahuan yang didapat dari pelatihan ini. Beberapa hal yang direncanakan oleh peserta untuk diseminasi tersebut adalah sebagai berikut
- Sosialisasi item development kepada sejawat dosen
- Berusaha untuk menerapkan item development pada tim dosen sesuai materi yang diampu
- Mulai diterapkan segera mungkin
- Menyusun proposal pelatihan item development untuk pembuatan soal-soal ujian di insitusi.
- Mengadakan WS dan semua dosen diharuskan mengikuti - Implementasikan ke dalam model evaluasi pembelajaran
IX. Penutup
Upaya peningkatan kualitas dan kuantitas pembuatan soal diharapkan dapat terjadi bukan hanya di tingkat nasional, tapi lebih jauh sampai ke tingkat Institusi Pendidikan. Untuk itu diharapkan bahwa para peserta workshop yang terpilih dapat menjadi calon narasumber untuk pelatihan yang diadakan di tingkat regional dan lokal. Dengan demikian upaya percepatan pembuatan soal yang berkualitas ini dapat berjalan dengan baik dan memiliki dampak yang lebih bermakna.
