Pola Laporan
• persiapan
• pelaksanaan
• Hasil
Manejemen
ujian
• persiapan
• Pelaksanaan
• Hasil
Manejemen
soal
Persiapan • Pemberitahuan • Pendaftaran • Penerimaan pendaftaran • Permasalahan • Solusi • Rekomendasi Pelaksanaan
• Melakukan kompilasi data pendaftar • Verifikasi data • Validasi ??? • Permasalahan • Solusi • Rekomendasi Hasil • Institusi pendaftar • Jumlah peserta • Permasalahan • solusi • Rekomendasi
Pra Ujian- Peserta
No Registrasi Sasaran Realisasi Keterangan
1 Jumlah institusi
teregistrasi 120 90 1.2. concern kurang Informasi tidak sampai 2 Jumlah peserta
teregistrasi
1730 1449 Ada beberapa data tidak sesuai dengan format
3 Jumlah peserta terverifikasi
1449 14 49 4 Jumlah peserta
tervalidasi Tidak dapat dilakukan karena waktu sempit 5 Target waktu
- registrasi 1 bulan 1 bulan 2 minggu Libur lebaran - verifikasi 7 hari 7 hari
- validasi - - Tidak dpt dilakukan - Penetapan peserta final H-14 H - 5 bentuk data sangat
No Masalah Solusi
1 Petunjuk/pedoman /format pendaftaran yang di kirim ke institusi/regional tidak lengkap
Format yang di gunakan sebagai pendaftaran tidak sesuai dengan format yang ada pada aplikasi
• Petunjuk/pedoman pendaftaran disusun/dirumuskan secara komprehensif , baru kemudian di kirim/di email ke regional. • Pengiriman petunjuk/pedoman
pendaftaran hanya satu sumber • Format yang di kirim sama dengan
data yg sesuai dengan aplikasi 2 Waktu pendaftaran ke regional
dan dari regional ke pusat tidak di tepati, karena berbagai hal, terutama libur ramadhan dan lebaran.
Tanggal pendaftaran ke regional dan dari regional ke pusat hendaknya di tepati. Pendaftaran di luar jadwal tersebut, dinyatakan tidak diterima.
Permasalahan dalam Registrasi dan Solusi
No Masalah Solusi
3 Panitia pusat masih menerima kiriman data via email dari institusi-institusi di masing-masing regional, tidak melalui sub regional atau double.
Institusi hanya boleh mengirimkan data ke regional/sub regional.
Panitia pusat tidak menerima data dari institusi, tetapi dari regional/sub regional.
4 Masih ada pengiriman data pendaftar yang belum/tidak sesuai dengan format yang disediakan, termasuk file foto dan format foto (jpeg: 600x800
•Berikan petunjuk pengisian data ke dalam format pendaftaran, termasuk cara melakukan edit foto agar sesuai dengan yang diinginkan (jpeg: 600x800 fixel) •Kembalikan data pendaftar, jika ada yang tidak sesuai
dengan format dan ketentuan yang diinginkan. •Pada tiap kolom yang ada dalam form pendaftaran
No Masalah Solusi
5 Pemakaian email pribadi menyulitkan identifikasi data, mengingat email TO yang masuk akan tercampur email lainnya
Perlu dibuat email tersendiri yang khusus di buat untuk keperluan pendaftaran TO
6 Format pendaftaran
berubah-ubah Format dikembangkan oleh tim IT dan didesign sedemikian rupa sehingga pengetikan data (termasuk hurup besar/kecil) hanya akan terbaca sesuai yang diinginkan. 7 Respon institusi pengirim peserta
try out sangat lamban Perlu sosialisasi yang lebih intensif melalui jejaring AIPNI dan organisasi profesi PPNI dan MTKP masing-masing daerah
Pelajaran yang dapat dipetik
0
Pentingnya koordinasi antara regional dan sub
regional serta panitia pusat dalam proses registrasi,
verifikasi dan validasi
0
Pentingnya melibatkan MTKP dan PPNI propinsi serta
AIPNI regional dalam proses tryout
0
Perlu disusun lebih teknis SOP registrasi, verifikasi
dan validasi
Registrasi, Verifikasi, dan
Validasi
1. Pemberitahuan registrasi kepada seluruh institusi peserta dilakukan 3 bulan sebelum hari H (format data peserta dilampirkan).
2. Registrasi dilakukan oleh AIPNI regional (AIPNI regional akan disesuaikan dengan MTKP regional).
3. Registrasi di AIPNI regional dilakukan 2 minggu setelah pemberitahuan registrasi. 4. Masing-masing regional mengirim data jumlah peserta dan institusi pengirim
(sesuai format yang berlaku [format sedang dibuat]).
5. AIPNI regional melakukan kompilasi dan verifikasi data peserta dari seluruh institusi regional.
6. AIPNI regional melakukan validasi ke institusi pengirim peserta, sehingga data menjadi sangat valid dan pasti tidak berubah lagi.
7. Data peserta yang telah sangat valid dari seluruh regional dikirim ke ke Panitia Pusat.
8. Proses dari no 4 s.d. 7 diselesaikan dalam waktu 2 minggu.
9. Bagi peserta yang terlambat mendaftar dalam periode ini, akan dimasukan dalam periode selanjutnya.
Verifikasi
1. Verifikasi dilakukan oleh pengelola regional dengan memastikan kesesuaian data antara lain nama institusi, jumlah peserta, dan kelengkapan data lainnya (sesuai format). 2. Jika terdapat data yang kurang/tidak sesuai agar langsung di
sampaikan kepada institusi pengirim.
3. Institusi pengirim diminta untuk merevisi dan melengkapi data-data yang tidak sesuai atau menambahkan data, untuk selanjutnya dikembalikan ke pengelola regional.
4. Setelah data dilengkapi dan dinyatakan benar dan sesuai oleh institusi pengirim, data tersebut di kirim kembali ke pengelola regional.
5. Pengelola regional memverifikasi ulang
Validasi Peserta
0
Setelah verifikasi data, proses validasi dilakukan oleh
penanggung jawab regional dibantu sub regional.
0
Data yang sudah diverifikasi dibuat dalam 2 bentuk data:
0 1 data per institusi yang akan divalidasi oleh pimpinan institusi dan regional dibantu sub regional
0 1 data rekapitulasi yang akan divalidasi oleh regional dan MTKP lingkup regional bersangkutan
0 Validasi ini dibuat dalam bentuk berita acara yang ditanda tangani stake holder yang bersangkutan
0
Data hasil validasi dikirim ke penanggung jawab pusat.
0Waktu validasi maksimal 6 hari kerja
Bank Soal Nasional
ITEM WRITER (?) LOCAL ITEM BANK ADMINIST. REGIONAL ITEM BANK ADM. NATIONAL ITEM REVIEW ITEM BANK- 1 (?) NATIONAL ITEM BANK ADM. PANEL EXPERT ITEM BANK – 2 (?)Try Out ITEM BANK – 3 (?) ITEM SELECTION PROCESS QUESTION BOOK ITEM BANK – 4 IBA: Ibu Tuti Herawati
Workshop
Kegiatan 2010 2011 2012
Fre
k Inst soal Frek Institusi soal Frek Inst Soal Item dev 4 Pddk Prof 360 3 50 Pddk S1 Ppni (praktisi & poltekes) 970 3 64 (S1) 111 Writer 1621 idev/rev mandiri 2 <<<* 17 <<<* Item Review 1 Pddk Prof 150 2 32 pddk ppni 614 3 44 (S1/PPNI) 102 Reviewer 1426* iba - - 1 26 pddk ppni - - - Iba + item rev - - 1 475 - - - Panel expert - - 2 Pddkn, ppni
(kolegium) 597 2 Pddkn, ppni (kolegium) 39 inst/59 expert 1160*
Item Development
NO Masalah Analisa Rekomendasi
1 Jumlah Item writer dan soal meningkat, manajemen soal lebih baik
namun mengapa jumlah soal baik tidak berbeda dengan TO sebelumnya
- Kualitas item writer ? Kriteria sudah ada , apakah saat penunjukkan oleh institusi sudah di penuhi atau atas dasar pemerataan? - Pemahaman tentang
kompetensi ners dan blue print?
- waktu pelatihan terlalu singkat untuk seseorang membuat soal yg baik? - Saat ini fase capacity building? AIPNI : 1. Memberikan perhatian khusus pada pembinaan dan pengembangan metode ujian 2. Mengakselerasi terbentuknya unit assessmen di institusi 3. Meningkatkan upaya untuk pelaksanaan pelatihan item dev institusi
Lanjut..
- Ketersediaan referensi? Apakah ada referensi yang sama untuk semua institusi ?
- Pemahaman yang sama antar item writer terkait content? - Proses pembelajaran di institusi yang belum sama dg metode ujian
4.Mengembangkan kelompok peminatan antara institusi MTKI : mempercepat dan memperluas
kemampuan item dev PPNI :
menetapkan satu pola dalam pengembangan item (LPUK)
Item Development
Masalah Analisa Rekomendasi
2. Terdapat peningkatan workshop mandiri
tetapi produktifitas soal saat mandiri masih belum banyak di terima nasional 1. Pengelolaan regional? Pengakuan? 2. Reward/punishment? 3. Keragaman peserta? 4. Komitmen item writer
saat pelatihan? 5. Bagaimana dengan
pengembangan institusi?
6. Apakah item dev baru sebatas workshop? 7. Implementasi? AIPNI : 1. Menyepakati terbentuknya unit assessment di institusi 2. Menyepakati model ujian institusi dg model LPUK 3. Pengembangan model reward dalam pengembangan soal
3 Kurang bervariasi Soal terkait core competency dan kurang memenuhi blue print
1. Permintaan soal yang di bawa belum sesuai dengan blue print 2. Soal yang di bawa peserta sesuai dg template 3. Soal yang di bawa
banyak yang sama 4. Peserta baru sedang
mau belajar menuylis soal
Item Review
Masalah Analisa Solusi
Soal yang terkumpul tidak proporsional dg blue print, kurang variasi
1. Soal terkumpul saat idev atau irev quantity oriented? 2. Kurangnya
pemahaman membuat soal sesuai dengan blue print?
3. Kemampuan penulis soal tuk menulis soal sel tertentu
terbatas?
1. Saat Item dev soal telah bervariasi dengan permintaan soal sesuai blue print
2. Item dev dengan permintaan
Masalah analisa Solusi Reviewer masih perlu banyak latihan Fasilitas/support proses review belum maksimal (komputer, It) Latihan sebagai reviewer kurang Belum banyak pilihan Harus menggunakan fasilitas panitia namun tidak tersedia Banyak latihan perlu penyediaan fasilitas yang cukup
Item Review
Masalah Analisa Rekomendasi
Penulis soal belum dapat feedback dari soal yang di buatnya
Belum ada sistem yg bisa memberikan feedback ke
item writer
IBA regional mengembalikan soal ke penulis soal sesuai dengan feedback.
Pengembangan program aplikasi IBA yang dapat mengidentifikasi penulis soal
Soal baik masih sedikit (kurang dari 50 %)
Soal masih banyak di anggap sulit oleh peserta
1. Pemilihan reviewer belum terseleksi dengan baik, pemahaman reviewer ttg kompetensi belum sama (esensial), 2. Pemilihan reviewer
masih berfokus pd distribusi institusi
Rekapitulasi Item Review 2012
irev 1 irev 2 irev 3
target realisasi target realisasi target realisasi
Reviewer 36 35 36 36 40 39
institusi 28 28 27 25 30 30
jumlah soal
terreview 1000 855* 1000 767* 1000 763*
jumlah soal baik 600 433 600 434 600 487
Total soal terreview:2385*; Soal baik: 1354
hpeq 2012\item review I_9_10juli2012\REKAP TINJAUAN HASIL REVIEW.xlsx
Panel Expert 2012
0
Dilakukan 2 kali dengan melibat 39 institusi
(pendidikan ners, PPNI, Kolegium) dengan meilbatkan
59 expert.
0
Menghasilkan
1160 soal
rekap laporan manajemen soal.xlsb
Masalah Analisa Rekomendasi
Variasi soal Fokus pada target jumlah soal, ketersediaan variasi soal terbatas, waktu dan referensi terbatas
NO. KEGIATAN TARGET REALISASI KETERANGAN 1. METODE UJIAN SEMUA KEGIATAN TO UKNI MENGGUNAKAN METODE CBT SEMUA KEGIATAN TO UKNI MENGGUNAKAN METODE CBT 2. LOKASI UJIAN MENGGUNAKAN 17 LOKASI UJIAN MENGGUNAKAN 17 LOKASI UJIAN MENGGUNAKAN CBT CENTER KEDOKTERAN
EVALUASI METODA UJIAN
No Kegiatan
Target
Realisasi
Masalah
Solusi
1. KESIAPAN CBT Semua CBT Center yang digunakan memenuhi jumlah workstation dan jarak Workstation sesuai dengan ketentuan. Walaupun semua workstation pada CBT center sudah memenuhi ketentuan tetapi ada beberapa CBT center mempunyai jawak WS yang terlalu padat Jarak workstation belum memenuhi standar Pelunya format evaluasi dan saran dari PP ke koordinator CBT 2. RUANG BRIEFING Semua ruang briefing pada CBT yang digunakan memadai disertai fasilitas penunjang seperti LCD dan Pengeras suaraBelum semua ruang briefing di CBT Center sudah siap digunakan sesuai waktunya pada H-1 (Waktu telat digunakan untuk persiapan ruangan terlebih dahulu) Keberadaan fasilitas penunjang ruang briefing belum memenuhi standar Perlunya ada panitia lokal ners yang membantu dalam persiapan ujian di CBT Center Kedokteran
No Kegiatan
Target
Realisasi
Masalah
Solusi
3. FASILITAS PENUNJANG Fasilitas Penunjang yang digunakan seperti AC, Loker, Ruang Karantina memadai serta rambu-rambu sudah terpasang pada H-1 Ada beberapa CBT Center yang fasilitas penunjang belum siap digunakan pada H_1 keberadaan wc kotor, rambu-rambu penunjuk ruang CBT belum terpasang, serta pengumuman pembagian ruangan dan workstation belum terpasang pada H-1 Keberadaan fasilitas penunjang ujian belum terpenuhi sesuai ketentuan/sta ndar Perlunya ada panitia lokal ners yang membantu dalam persiapan ujian di CBT Center Kedokteran
No Kegiatan Target Realisasi
1 Kehadiran Semua PP dapat hadir tepat waktu
PP Terlambat 1 orang 2. Workshop PP Semua PP mendapatkan
pemahaman yang sama terhadap proses pelaksanaan TO CBT
Ada beberapa PP pada saat pelaksanaan ujian tidak mematuhi petunjuk pelaksanaan ujian. 3 Pemahaman Tupoksi PP Seluruh PP memahamai ketentuan-ketentuan dalam proses pelaksanaan TO UKNI CBT
Ada beberapa PP yang melaksanakan tugasnya tidak sesuai ketentuan. contoh: segel, briefing pengawas lokal dan peserta,
No Kegiatan Target Realisasi
4.
Pembagian perangkat ujian
Semua PP mendapatkan perangkat ujian yang lengkap
PP hanya menandatangani penerimaan perangkat ujian 5. Pengecekan perangkat ujian PP melakukan pengecekan kelengkapan perangkat ujian
PP secara individu melakukan pengecekan perangat ujian 6. Penjelasan
pengembalia n perangkat ujian
Semua PP mendapatkan penjelasan tentang proses pengembalian perangkat ujian termasuk checklist kelengkapan
pengembalian perangkat
Semua PP tidak mendapatkan penjelasan pengembalian perangkat ujian
MASALAH DAN SOLUSI
BRIEFING PENGAWAS PUSAT
NO MASALAH SOLUSI
1. Adanya kehadiran pengawas pusat Pada saat briefing belum tepat Waktu
Dibuatkan standar baku toleransi keterlambatan pengawas pusat
2. TOR workshop PP belum terstandar Materi workshop yang diperoleh
PP belum terstandar dan belum sesuai tahapan-tahapan ujian
Perlu adanya SOP materi workshop PP.
Perlu SOP tentang materi briefing PP ke pengawas lokal
Perlu SOP tentang materi briefing PP ke peserta 3. Belum ada standar evaluasi
pemahaman tupoksi PP
Dilakukan evaluasi tentang Tupoksi PP
NO MASALAH SOLUSI
4. Belum ada berita acara penerimaan perangkat ujian dari penanggung jawab pembawa perangkat ujian ke PP.
Dibuatkan berita acara serah terima perangkat ujian.
5. Belum adanya check list kelengka- pan perangkat ujian
Dibuatkan lembar chek list kelengkapan perangkat ujian
6. Pengembalian perangkat ujian tidak sesuai ketentuan
Perlunya penjelasan dan Sosialisasi PP tentang pengembalian perangkat ujian
MASALAH DAN SOLUSI
BRIEFING PENGAWAS PUSAT
1. Waktu pelaksanaan
Waktu pelaksanaan briefing dilaksanakan tepat waktu sesuai koordinasi di awal
Semua kegiatan briefing dilakukan pada H-1 tetapi Ada beberapa CBT Waktu pelaksanaan briefing terlambat dilaksanakan terkait dengan kehadiran peserta terlambat 2. Materi Briefing
dengan peserta
Materi briefing dengan peserta dari pengawas pusat seragam dengan media yang seragam
Ada pengawas pusat yang belum menjelaskan aplikasi CBT pada H-1 pada peserta
No.
Kegiatan
Target
Realisasi
3. Pengecekan Lokasi Ujian
Semua peserta di semua CBT sudah mengetahui lokasi ujiannya dan melakukan pengecekan lokasi/ruangan ujian
Belum semua peserta mengetahui pembagian ruangan ujian dan melakukan pengecekan lokasi ujian pada H-1 dikarenakan ada beberapa CBT center belum membagi dan memasang rambu-rambu atau penunjuk pada H-1 4. Distribusi kartu
peserta
Pada H-1 Semua kartu peserta dapat terdistribusi sesuai ketentuan
Tidak semua kartu peserta terdistribusi pada H-1 karena beberapa peserta di beberapa CBT tidak membawa identitas berfoto
No.
Kegiatan
Target
Realisasi
5. Laporan pelaksanaan (H-1) di Lokasi Ujian
Semua pengawas pusat melaporkan kegiatan (H-1) di lokasi ujian secara lengkap sesuai format yang
disediakan
Semua pengawas pusat membuat laporan pelaksanaan (H-1) di Lokasi Ujian sudah sesuai format
MASALAH DAN SOLUSI - BRIEFING PESERTA
NO MASALAH SOLUSI
1.
Keterlambatan waktu briefing dengan peserta dan pengawas lokal
Perlunya standar baku toleransi keterlambatan peserta dan pengawas lokal 2. Belum seragamnya pemberian materi
briefing oleh pengawas pusat kepada peserta dan pengawas lokal
Dibuatkan daftar cheklist materi briefing pengawas pusat dengan peserta serta materi briefing dengan pengawas lokal 3. Belum semua kartu peserta terdistribusi
pada H-1 karena belum semua peserta membawa id card berfoto
MASALAH DAN SOLUSI - BRIEFING PESERTA
NO MASALAH SOLUSI
4. Pengecekan lokasi ujian oleh peserta belum dilakukan sesuai standar (H-1)
Perlunya panitia lokal baik tim admin atau IT dari ners untuk membantu persiapan ujian spt memasang rambu-rambu, memasang pengumuman pembagian ruangan serta pengecekan workstation
No Kegiatan Target Realisasi
1
Pembukaan berkas ujian
Pembukaan berkas ujian dilaksanakan sesuai ketentuan
Ada CBT center pembukaan berkas ujian tidak disaksikan oleh koordinator CBTnya berhubung sedang adanya kegiatan
2. Pembagian nomor login peserta
Pembagian nomor login peserta dilakukan
berdasarkan urutan peserta
Pembagian nomor login kepada pengawas lokal mengalami kesulitan karena disusun tidak berdasarkan nomor urut peserta
3
Waktu pelaksanaan ujian
Waktu pelaksanaan ujian dilakukan secara serentak di seluruh CBT
Waktu pelaksanaan ujian di beberapa CBT dilaksanakan terlambat dikarenakan adanya kendala diprogram komputer
No Kegiatan Target Realisasi
4. Pengisian Berita Acara Pelaksaaan Ujian
Pengisian berita acara pelaksanaan ujian dilaporkan secara lengkap dan detil sesuai format
Belum semua pengawas pusat mengisi berita acara pelaksanaan ujian secara detil dan lengkap.
5. Penyegelan tas soal
Melakukan penyegelan tas soal sesuai ketentuan
Ada beberapa pengawas pusat melakukan penyegelan tas kurang benar.
6. Pengembalian Berkas Ujian
Pengembalian berkas ujian sesuai dengan ketentuan
Belum semua pengawas pusat mengembaikan berkas/barang sesuai dengan ketentuan: seperti hard disk demo, daftar absensi, informasi login
MASALAH DAN SOLUSI – PELAKSANAAN UJIAN
NO MASALAH SOLUSI
1. Pembukaan berkas ujian belum sesuai ketentuan dihadiri oleh koordinator CBT
Perlunya panitia lokal ners untuk persiapan menjadi koordinator CBT –Ners ATAU Perlunya surat pernyataan kesiapan membantu penyelenggaraan ujian ners
2. Waktu yang diperlukan dalam pembagian nomor login peserta kurang efisien
Petugas admin persiapan ujian perlu menyusun informasi login sesuai nomor urut peserta
MASALAH DAN SOLUSI – PELAKSANAAN UJIAN
NO MASALAH SOLUSI
3. Penyegelan tas tidak memenuhi ketentuan
Perlunya materi penyegalan yang benar saat briefing PP
4. Pengembalian berkas/barang belum sesuai tas/tempat yang seharusnya
Perlunya penjelasan saat briefing pada PP serta perlu adanya tanda pengenal masing-masing berkas yang sesuai dengan tempat nya.
RENCANA TINDAK LANJUT
1. PERLUNYA SURAT PERNYATAAN KESIAPAN KOORDINATOR CBT, IT LOKAL MAUPUN TIM ADMIN CBT CENTER DALAM DALAM MEMBANTU
PENYELENGGARAAN UJIAN NERS
ATAU PERLUNYA DIBENTUK PANITIA LOKAL NERS YANG MEMBANTU
PELAKSANAAN UJIAN DI FAKULTAS KEDOKTERAN BAIK SEBAGAI ADMINISTRASI MAUPUN IT LOKAL
2. PERLUNYA STANDAR BAKU MATERI WORKSHOP PENGAWAS PUSAT A. MATERI SAAT BRIEFING DENGAN PESERTA
B. MATERI SAAT BRIEFING DENGAN PENGAWAS LOKAL
C. MATERI TENTANG CARA PENGISIAN BERITA ACARA UJIAN BAIK PERSIAPAN MAUPUN PELAKSANAAN UJIAN
D. MATERI TENTANG CARA PENGECEKAN/PERSIAPAN WORKSTATION E. MATERI TENTANG PENGEMBALIAN BERKAS UJIAN
3. PERLUNYA PENAMBAHAN PANDUAN/SOP MELIPUTI :
A. SOP PENGAMBILAN TAS SOAL OLEH PP DARI PENANGGUNG JAWAB TAS SOAL B. SOP CARA PENYEGELAN TAS SOAL OLEH PENGAWAS PUSAT
Distribusi Peserta 2012
CBT Institusi yg terlibat Peserta terdaftar Peserta Hadir Peserta tidak hadir UNSYIAH 3 61 59 2 USU 4 60 58 2 UNAND 3 55 47 8 UNBRAH 5 83 80 3 Regional 1 CBT Institusi yg terlibat Peserta terdafta r Peserta HadirPeserta tidak hadir
YARSI 10 176 162 14
UNPAD 7 140 137 3
Regional 2 & 3
terlibat terdaftar Hadir tidak hadir UMY 3 41 41 0 UGM 10 145 139 6 UNISSULA 6 88 87 1 UNDIP 3 45 44 1 Regional 5, 6 & 7 CBT Institusi yg
terlibat terdaftar Peserta Peserta Hadir tidak hadir Peserta
UWKS 10 130 128 2 UMM 3 39 33 6 UB 3 75 73 2 UNUD 4 103 102 1 UNLAM 5 75 73 2 UNHAS 6 94 91 3
Distribusi institusi peserta TO
CBT: terdaftar 1449, hadir 1418
2011 2012 Regional 1 7 15 Regional 2 6 (13) 5 Regional 3 9 (22) 16 Regional 4 13 22 Regional 5 13 20 Regional 6 2 5 Regional 7Total Institusi 3 ( total 53 dari 64 penyelenggara ners) 7 ( total) 90 (dari 140 penyelenggara ners)
Try Out 2011 2012
Buku TOTAL 1 2 TOTAL 1 2 3 4
Jumlah Peserta 862 437 425 1418 358 352 354 354 Jumlah Soal 360 180 180 720 180 180 180 180 Nilai Rerata (+ SB) 45.16 (+ 7.31) 45.08 (+ 6.92) 45.24 (+ 7.68) 44.84 (+6.99) 44.53 (+ 6.52) 44.63 (+ 7.20) 45.70 (+ 7.21) 44.49 (+ 6.95) Nilai Tertinggi 68.33 61.67 68.33 63.89 60.00 61.11 63.89 62.78 Nilai Terendah 24.44 26.67 24.44 21.11 23.89 23.89 21.11 25.00 KR21 0.74 0.72 0.77 0.72 0.68 0.74 0.74 0.72 Rerata Indeks Kesulitan 0.45 0.45 0.45 0.45 0.45 0.45 0.46 0.44 % Soal Baik 40.56 38.89 42.22 40.56 38.33 42.22 39.44 42.22
Analisa hasil TO
0
Jumlah peserta untuk setiap booklet soal cukup
antara minimal 350 peserta dengan distribusi
penjawab telah di acak untuk setiap soal di jawab
oleh institusi regional untuk menghitung validitas dan
reliabilitas serta distraktor
0
Ada perwakilan regional
0
bancmarking nasional untuk setiap soal
0
Dapat melihat kemampuan institusi regional
Nilai rata rata
0
menunjukan nilai rata –rata yang dapat di jawab oleh
seluruh peserta dengan SD
0
Arti:
masih rendah dari harapan , mungkin di sebabkan
oleh berbagai faktor diantaranya :
1.
Soal masih dianggap sulit : kompetensi mahasiswa
kurang (kompetensi peserta kurang)
2.
Kualitas soal kurang bagus, ambigue, kurang jelas,
membingungkan ( penulis soal?, reviewer?,
pengajaran di institusi, pola belajar institusi, dsb)
3.
Proses belajar belum mengacu pada kompetensi
esensial dan blue print
KR 21
0
Menunjukan reliabilitas booklet soal : paling tidak
harus 0,70
0
Semakin tinggi semakin reliable soal
0
KR 21 ini cukup tapi belum memuaskan karena masih
ada di kisaran 70 %
0
Mungkin di sebabkan oleh :
- penulis soal masih kurang dapat melihat kompetensi
esensial
- Kurikulum belum menggambarkan kompetensi yang
hendak di capai
Tingkat kesulitan
0
Sangat di pengaruhi oleh :
- kemampuan peserta
- proses pengajaran yang kurang sesuai : kurang
fokus
- Pengajaran tidak sesuai dengan kompetensi
- Proporsi pengajaran dalam kurikulum kurang sesuai
- Tingkat kompetensi yang di tulis dalam soal terlalu
tinggi
- bentuk soal yang kurang sesuai kaedah :
Tinjauan 1
0 20 40 60 80 100 120 140 160 T1-1 T1-2 T1-3 Jumlah Soal 1 Rerata 1 Jumlah Soal 2 Rerata 2 Jumlah Soal 3 Rerata 3 Jumlah Soal 4 Rerata 40 20 40 60 80 100 120 140 160 T2-1 T2-2 T2-3 Jumlah Soal 1 Rerata 1 Jumlah Soal 2 Rerata 2 Jumlah Soal 3 Rerata 3 Jumlah Soal 4 Rerata 4
Tinjauan 3
0 10 20 30 40 50 60 Jumlah Soal 1 Rerata 1 Jumlah Soal 2 Rerata 2 Jumlah Soal 3 Rerata 3 Jumlah Soal 4 Rerata 4Tinjauan 4
0 10 20 30 40 50 60 70 T4-1 T4-2 T4-3 T4-4 T4-5 Jumlah Soal 1 Rerata 1 Jumlah Soal 2 Rerata 2 Jumlah Soal 3 Rerata 3 Jumlah Soal 4 Rerata 4Tinjauan 5
0 20 40 60 80 100 120 T5-1 T5-2 T5-3 T5-4 Jumlah Soal 1 Rerata 1 Jumlah Soal 2 Rerata 2 Jumlah Soal 3 Rerata 3 Jumlah Soal 4 Rerata 40 5 10 15 20 25 30 35 40 T6-1 T6-2 T6-3 T6-4 T6-5 T6-6 T6-7 T6-8 T6-9 T6-10 T6-11 Jumlah Soal 1 Rerata 1 Jumlah Soal 2 Rerata 2 Jumlah Soal 3 Rerata 3 Jumlah Soal 4 Rerata 4
