PPT UEU Pelatihan Pengembangan SDM Pertemuan 13

(1)

EVALUASI PROGRAM PPSDM PERTEMUAN 13

Dra. Sri Hastuti Handayani, M.Si.,Psikolog

(2)

TUJUAN EVALUASI

1. Menentukan apkh suatu program telah

mencapai tujuannya

2. Mengidentifkasi kekuatan dan

kelemahan proses pengembangan SDM

3. Menentukan rasio biaya dan manfaat dr

suatu program pengembangan SDM

(3)

5. Mengetes kejelasan dan validitas dr tes dan

pertanyaan

6. Menentukan apkh suatu program telah

mencapai mengidentifkasi pastisipan/

trainee

mana yg memiliki manfaat

terbanyak/tersedikit dr suatu program

7. Memperkuat hal2 yg disampaikan oleh

pastisipan/

trainee

8. Mengumpulkan data yg dpt dipakai utk

membantu pemasaran program di masa

(4)

MANFAAT EVALUASI

Utk mengetahui berbagai informasi:

• _{Apkh proses pembelajaran telah tjd ?} • _{Apkh tujuan pelatihan telah tercapai ?}

• _{Apkh kebutuhan peserta telah terpenuhi ?}

• _{Bgmn tingkatan peserta pd waktu baru dan ssdh}

mengikuti pelatihan ?

• _{Apkh kebutuhan fasilitator telah terpenuhi ?} • _{Apkh fasilitator telah memenuhi persyaratan ?} • _{Bgmn rencana partisipas menggunakan}

ketrampilan tsb ?

• _{Bgmn efektivitas suatu pelatihan ?} • _{Apa yg perlu ditingkatkan ?}

(5)

EVALUASI PROGRAM LATIHAN DAN PENGEMBANGAN

LANGKAH-LANGKAH EVALUASI

KRITERIA

TRANSFER ATAU PROMOSI

(6)

JENIS EVALUASI

• _Reaksi

_trainee

_{thd isi dan proses pelatihan}

atau thd pelaksanaan pelatihan (sarana,

metode, isi, dan lainnya).

• _Pembelajaran

_{(apakah keterampilan}

peserta meningkat, ada perubahan sikap

dan pengetahuan peserta pelatihan).

• _Perilaku

_{, apakah ada perubahan perilaku}

peserta setelah mengikuti pelatihan.

• _Hasil

_{, ada peningkatan prestasi organisasi}

atau unit kerja sebagai akibat dari

(7)

Pengukuran efektiftas training

• Reaksi.

Diukur berdasarkan impresi, opini dan sikap, seberapa banyak partisipan yang menyukai program: content, trainer, metode.

• Pembelajaran.

Seberapa baik trainee mempelajari skill tertentu (know-how).

• Perilaku.

Identifkasi perubahan dalam skill, pola pekerjaan,

relationship, kemampuan. Pengujian transfer of training.

• Hasil.

(8)

Ada beberapa kriteria yang dapat dijadikan penilaian keberhasilan suatu pelatihan :

(9)

CARA MELAKUKAN EVALUASI

• _{Evaluasi dr pelatih/fasilitator}

• _{Evaluasi dr peserta}

• _{Evaluasi dr pihak ketiga}

• _{Evaluasi di lapangan utk}

(10)

EVALUASI DENGAN ALAT UKUR

 Dalam training terjadi proses belajar yang berarti terjadi perubahan2 tingkah laku trainee sesuai dengan harapan trainer, bisa berupa :

 Bila yang diajarkan pengetahuan, maka memperlihatkan penguasaan tentang pengetahuan yang diajarkan

 Bila yang diajarkan ketrampilan, maka memperlihatkan kemampuan dalam ketrampilan tersebut

 Training dikatakan efektif, bila sebagian besar training memenuhi kriteria keberhasilan tersebut

 Training disebut Tdk / kurang efektif, bila hanya sebagian kecil trainee yang berhasil memenuhi kriteria keberhasilan tersebut.

(11)

LANGKAH2 EVALUASI DG ALAT

(12)

PRE TEST

POST TES

• Tes dilakukan sebelum

training

• Tes dilakukan setelah training

• Sejauh mana trainee

memiliki pengetahuan / ketrampilan sebelum diberikan training

• Sejauh mana trainee memiliki ketrampilan setelah diberikan

training

• Skor lebih rendah sebelum ditraining

(13)



Makin besar perbedaan antara skor pre-test

dan post-test berarti makin banyak trainee

belajar



_{Makin sedikit perbedaan berarti makin sedikit}

yang dipelajari, dapat terjadi karena :

1. Trainee sudah banyak memiliki / menguasai

pengetahuan / ketrampilan yang dilatihkan,

sehingga yang dipelajari hanya sedikit saja

2. Trainee tidak mampu mengikuti program

(14)

Ukuran untuk Mengevaluasi

Pelatihan dan Pengembangan

1. Opini Peserta: Menanyakan opini para peserta agar memperoleh respons dan saran untuk

perbaikan, terutama dalam tingkat kepuasan peserta.

2. Tingkat Pembelajaran: Mengukur peningkatan kompetensi peserta dengan membandingkan

hasil tes sebelum dan sesudah pelatihan.

3. Perubahan Perilaku: Mengevaluasi kemampuan

pelatihan dalam mengarahkan para peserta untuk mengubah perilaku mereka di tempat kerja.

(15)

4. Pencapaian Tujuan Pelatihan dan

Pengembangan: Mengevaluasi sampai di mana

program2 tersebut telah mencapai tujuan-tujuan yang ditetapkan dan secara nyata berdampak pada kinerja.

5. Benchmarking:

 _{Proses memonitor dan mengukur proses2 internal} suatu perusahaan, kemudian membandingkan

data tersebut dengan informasi dari perusahaan2 yang unggul dalam bidang2 tersebut.

 _{Benchmarking untuk pelatihan dan pengembangan} umumnya berfokus pada ukuran2 seperti biaya

pelatihan, rasio staf pelatihan terhadap seluruh karyawan, dan baru tidaknya sistem2

(16)

PELAKSANAAN EVALUASI

1. Evaluasi selama proses training

2. Evaluasi pada akhir setiap sesi

(17)

Faktor Efektivitas Pelatihan

1. Participation atau partisipasi merupakan keterlibatan seorang peserta dalam kegiatan secara aktif dan secara langsung.

2. Repetition adalah melakukan atau mengatakan secara berulang-ulang dalam usaha menanamkan ide dalam ingatan seseorang.

3. Relevance, pelatihan mempunyai arti atau manfaat yang sangat penting pada seseorang.

4. Transference artinya adanya kesesuaian antara

pelatihan dengan pekerjaan yang dilakukan sehari-hari oleh pegawai.

5. Feedback merupakan pemberian informasi atas

perkembangan kemajuan yang telah dicapai oleh peserta pelatihan, mana yang perlu diperbaiki atau

(18)

TINGKATAN EVALUASI

• _{Reaksi dan tindakan terencana}

• _{Proses pembelajaran}

• _{Aplikasi pekerjaan}

• _{Hasil Usaha}

• _{Pengembalian keuntungan}

(19)

Karakteristik Tingkatan Evaluasi

TINGKAT EVALUASI

ASPEK YANG DIUKUR

(20)

DATA ROI PD BERBAGAI LEVEL

Level 1 Selama

Level 2 Selama

Level 3 Sesudah

(21)

Evaluasi Tingkat 1 & 2

(Mengukur Kinerja Partisipan)

• Mengukur reaksi dan aksi yg direncanakan

(tes)

• Mengukur perubahan dlm pengetahuan dan

ketrampilan (tes)

• Latihan ketrampilan

• Laporan pribadi

• Latihan/exercise

• Observasi selama program pelatihan

(22)

Target Area Evaluasi Tingkat 1

• Isi program

• Materi instruksi

• Penugasan di luar kelas

• Metode penyampaian

• Instruktur/fasilitator

• _{Fasilitas dan lingkungan pembelajaran}

• _{Evaluasi secara umum}

(23)

Asumsi ttg Persepsi Partisipan

• _{Partisipan mampu utk membuat}

penilaian yg akurat ttg seberapa

banyak yg telah mrk pelajari

• _{Partisipan lbh banyak belajar dr sesi}

yg mrk suka

• _{Partisipan lbh banyak belajar dr}

(24)

ROI pd Data Level 1

• _{Pengetahuan dan ketrampilan apa yg telah}

meningkat ?

• _{Rencana tindakan apa yg akan dilakukan dg}

peningkatan pengetahuan dan ketrampilan ?

• _{Dampak apa dlm unit keuangan yg akan}

meningkat dlm unit kerja ?

• _{Apa derajat keyakinan dr perhitungan tsb ?}

• _{Membandingkan manfaat keseluruhan}

(25)

Peningkatan Evaluasi level 1

• Pertimbangan evaluasi berkesinambungan

• Mencoba menghitung peringkat pelatihan

• Mengumpulkan info yg berhubungan dg peningkatan

• Memberikan waktu yg cukup utk mengisi formulir

(26)

Siklus Umpan Balik Palsu

Partisipan/trainee

menyukai program pelatihan

Instruktur/

fasilitator dihargai Perilaku instruktur/

fasilitator lbh terfokus pd pencapaian

kesenangan trainee

Peringkat/rating instruktur/fasilitat

(27)

ROI dg Data Level 2

• _{Membuat tes hasil program yg}

merefeksikan isi program

• _{Membangun hubungan antara data tes dg}

hsl kinerja partisipan

• _{Meramalkan derajat/level kinerja dr setiap}

partisipan dg skor tes yg ada

• _{Merubah data kinerja pd nilai2 keuangan}

• _{Bandingkan keseluruhan nilai peramalan}

(28)

Evaluasi Tingkat 3 & 4

(Aplikasi di pekerjaan dan hasil usaha)

• _{Menggunakan tindak lanjut penugasan}

• _{Merencanakan asesmen lanjutan dg survey,}

wawancara, observasi dan/atau fokus grup

• _{Mengintegrasikan rencana tindakan ke dlm}

program

• _{Mengimplementasikan kontrak kinerja}

• _{Memimpin sebuah sesi evaluasi lanjutan}

khusus

(29)

Evaluasi Tingkat 5 (Mengukur ROI)

Keuntungan Program

BCR = X 100

Biaya Program

BCR = Benefit to Cost Ratio

(Rasio antara Keuntungan dan Biaya)

Keuntungan Bersih Program

Keuntungan Bersih Program

(30)

MODEL CBA/ROI

(31)

Model ROI dlm Program PPSDM

Mengumpulkan Data Pasca

Program Data Pasca

Program Pelatihan

Mengidentifikan keuntungan tak

nyata (Intangible)

Instrumen

Evaluasi _EvaluasiTujuan

Desain

Evaluasi Tingkat/Level Evaluasi

Pengaruh Signifikan: • Pernyataan Kebijakan • Panduan & prosedur • Ketrampilan staf

(32)

Variabel penting dlm Evaluasi

Pelatihan

• _{Keahlian staf dlm evaluasi}

• _{Sumberdaya yg dialokasikan ke dlm proses}

evaluasi

• _{Komitmen organisasi utk mengukur dan}

mengevaluasi

• _{Tekanan utk menggunakan perhitungan}

ROI

• _{Sifat dan tipe program pengembangan}

(33)

Alat Pengumpul Data Evaluasi

• _Kuesioner

• _{Survey Sikap}

• _Fasilitator

• _Wawancara

• _{Fokus Grup}

• _Observasi

(34)

Pengumpulan Data Setelah Program

Pelatihan

• _{Survey tindak lanjut}

• _{Kuesioner tindak lanjut}

• _{Observasi di dalam pekerjaan}

• _{Wawancara dg partisipan}

• _{Fokus grup tinak lanjut}

• _{Penugasan program}

• _{Perencanaan tindakan}

• _{Kontrak kinerja}

(35)

DESAIN EVALUASI

• Desain program satu kali (

One-Shot Program

Design

)

• _{Kelompok tunggal, desain sebelum & pasca tes}

(

single group, pre-test & post-test design)

• Kelompok tunggal, desain seri waktu (

single

group, time series design

)

• _{Desain kontrol grup (}

_{control group designi)}

• _{Desain eksperimental ideal}

_{(ideal experimental}

design)

(36)

Variabel Tdk Nyata dlm Evaluasi

Pelatihan

• _{Peningkatan kepuasan kerja}

• _{Peningkatan komitmen organisasi}

• _{Peningkatan kerjasama tim}

• _Peningkatan

_{customer service}

• _{Pengurangan keluhan}

• _{Pengurangan absensi}

• _{Pengurangan keluar-masuk tenaga}

(37)

Variabel Pengaruh Kredibilitas

Data

• _{Reputasi sumber}

• _{Metodologi yg digunakan}

• _{Asumsi yg digunakan dlm}

melakukan analisis

• _{Realisme dlm hsl data}

(38)

Contoh Evaluasi Program

Pelatihan

Gambaran Program

• _{Tujuan Umum dan Khusus} _{: ...} • _Metode _{: ...}

• _Peserta _{: ...} • _{Fasilitator : ...} • _Materi _{: ...}

ASPEK EVALUACARA

SI SIAPA BILAMANA DIMANA

(39)

Contoh Evaluasi Program

Pelatihan

ASPEK PENILAIAN

SKALA PENILAIAN

S

K K C B SB Relevansi

Apakah Anda puas dg pelatihan ini ?

Apakah pelatihan memenuhi kebutuhan Anda ?

Isi

Apakah isi pelatihan sebanding ant

(40)

Contoh Evaluasi Program

Pelatihan

1.Bagian mana dari pelatihan yang:

– Sangat relevan dengan kebutuhan:

– Kurang relevan dengan kebutuhan:

– Tidak relevan sama sekali dengan kebutuhan: 2.Sampai seberapa jauh penguasaan ketrampilan

dipengaruhi oleh pelatihan yang diberikan ? 3.Perubahan apa yang akan Anda lakukan,