BAB 2 DASAR METODE PENELITIAN
2.8 Reabilitas dan Validitas
Bagian ini akan membahas konsep reliabilitas dan validitas dalam penelitian, khususnya dalam kaitannya dengan penelitian saya sendiri. Secara umum, reliabilitas mengacu pada konsistensi pengukuran, dan validitas mengacu pada sejauh mana suatu instrumen mengukur apa yang ingin Anda ukur. Namun, istilah-istilah ini dapat dibagi menjadi banyak sub-jenis, seperti yang akan terlihat di bawah ini.
2.8.1 Reabilitas
Dimulai dengan reliabilitas tes-tes ulang, masalahnya adalah apakah konsep yang Anda ukur diukur secara konsisten sepanjang waktu. Jika, misalnya, Anda mengukur tinggi peserta Anda dua kali dan mendapatkan pengukuran yang berbeda setiap kali, maka kecuali mereka menggunakan obat pemacu pertumbuhan, Anda dapat menyimpulkan bahwa cara Anda mengukur tinggi badan tidak terlalu dapat diandalkan. Kecuali jika konstruk yang Anda ukur diteorikan tidak stabil, maka sebaiknya ukuran Anda memberikan hasil yang sama pada kesempatan yang berbeda.
Lalu, bagaimana Anda dapat memastikan bahwa pengukuran Anda memiliki keandalan yang tinggi? Perubahan pengukuran dapat merupakan hasil dari kesalahan sistematis (faktor perubahan situasi yang membiaskan hasil) atau kesalahan acak. Seperti namanya, kesalahan acak terjadi tanpa alasan tertentu sehingga tidak dapat dikendalikan. Cara untuk meningkatkan reliabilitas, oleh karena itu, adalah dengan ketat mengontrol situasi eksperimental, memastikan bahwa itu adalah semirip mungkin untuk semua peserta setiap kali studi dijalankan.
Cara utama di mana keandalan dimaksimalkan dalam studi longitudinal yang dilaporkan dalam penelitian ini adalah dengan memastikan bahwa semua peserta menyelesaikan tugas dalam kondisi gaya ujian yang sama di setiap titik pengujian. Ini termasuk bekerja sendiri, dalam keheningan, dan memiliki jumlah waktu yang sama untuk menyelesaikan tugas. Kontrol ini harus mengurangi kemungkinan gangguan atau tekanan waktu yang mengganggu kinerja. Akan menjadi masalah jika, misalnya, tugas diselesaikan dalam keheningan pada titik pengujian pertama dan di lingkungan yang bising pada titik pengujian kedua – ini dapat menghambat kinerja putaran kedua memberikan kesan menyesatkan bahwa para peserta telah menjadi sistematis. lebih buruk dalam penalaran atau bisa menyembunyikan perbaikan nyata. Karena itu, setiap perubahan yang ditemukan harus merupakan produk dari perubahan kemampuan yang sebenarnya, bukan kesalahan dalam pengukuran.
Keandalan internal adalah sejauh mana semua item dalam ukuran terkait, yaitu secara konsisten mengukur konstruk yang sama. Jika Anda memiliki ukuran yang terdiri dari beberapa item, itu adalah ide yang baik bahwa semua item mengukur konstruksi yang sama sampai batas tertentu, meskipun juga diinginkan bahwa setiap item membawa sesuatu yang sedikit unik juga. Ini memastikan bahwa ukuran itu berguna, dapat ditafsirkan, dan tidak terlalu panjang. Sebagai contoh, misalkan Anda memiliki 15 item tugas yang seharusnya mengukur sikap terhadap imigrasi, tetapi tiga item benar-benar mengukur sikap terhadap emigrasi. Sikap terhadap kedua hal tersebut mungkin terpisah dan tidak berhubungan sehingga skor pada 12 item keimigrasian mungkin tidak berkorelasi dengan skor pada ketiga item emigrasi dan ini akan memberikan reliabilitas internal tugas yang rendah. Perhatikan bagaimana hal ini berbeda dari reliabilitas tes-tes ulang – tugas imigrasi dapat memberikan hasil yang konsisten jika dilakukan ulang setiap minggu, tetapi item dalam tugas tersebut tidak menghasilkan respons yang konsisten.
Keandalan internal dapat diukur dengan analisis split-half atau alfa Cronbach setelah tugas diselesaikan oleh sejumlah peserta. Dalam analisis split-half, item pada tugas dibagi menjadi dua kelompok, biasanya dengan percobaan bergantian atau di titik tengah. Skor peserta pada dua bagian item kemudian menjadi sasaran analisis korelasi. Dalam alfa Cronbach, korelasi serupa dihitung tetapi rata-rata di setiap kemungkinan kombinasi bagian
tes. Korelasi yang dihasilkan, atau koefisien reliabilitas, dari salah satu metode dianggap baik jika melebihi 0,8. Keandalan di bawah 0,7 akan menunjukkan keandalan internal yang dipertanyakan, tetapi ini hanyalah aturan praktis. Split-half dan analisis alpha Cronbach dilaporkan untuk langkah-langkah penalaran yang digunakan dalam bab-bab selanjutnya.
2.8.2 Validitas
Validitas adalah konsep yang sedikit lebih luas daripada reliabilitas, mencakup validitas eksternal dan validitas internal. Validitas eksternal adalah sejauh mana sebuah studi digeneralisasikan ke orang lain dan situasi lain, dan itu disinggung di Bagian 3.4. Ini mencakup validitas ekologi - apakah penelitian ini sangat mirip dengan situasi kehidupan nyata - dan validitas temporal - apakah temuan akan berlaku di masa lalu dan masa depan serta masa kini.
Penalaran adalah proses kognitif, dan psikologi kognitif mengasumsikan bahwa semua manusia dilahirkan dengan sistem pemrosesan kognitif yang sama. Ini berarti bahwa temuan yang terkait dengan pemrosesan kognitif diasumsikan berlaku lintas waktu dan lintas spesies.
Yang mengatakan, ini mengasumsikan bahwa manipulasinya sama. Jika orang lain, di lain waktu, mempelajari silabus matematika tingkat A Indonesia saat ini, maka kita bisa berharap hasilnya sama. Ini bukan untuk mengatakan bahwa hasilnya dapat digeneralisasikan kepada mahasiswa yang mempelajari silabus matematika yang berbeda dalam sistem pendidikan non-Indonesia, atau di masa lalu atau masa depan.
Dalam hal validitas ekologis, satu masalah adalah apakah ukuran kemampuan penalaran yang digunakan dalam penelitian saya relevan dengan klaim TFD tentang jenis penalaran yang dihargai oleh pasar kerja. Apakah tugas berbasis pena dan kertas merupakan ukuran yang valid dari jenis keterampilan penalaran yang mungkin ditunjukkan oleh lulusan matematika dalam pekerjaan mereka di masa depan? Di satu sisi, tidak mungkin bahwa tugas-tugas tersebut sangat mirip dengan tugas-tugas-tugas-tugas yang akan dihadapi dalam kehidupan sehari-hari. Di sisi lain, dapat dikatakan bahwa peningkatan keterampilan penalaran logis secara umum (seperti yang disarankan oleh TFD) akan ditunjukkan pada tugas penalaran logis apa pun karena sifat universal dari pemrosesan kognitif. Karena TFD tidak merinci secara tepat jenis keterampilan penalaran logis yang ditingkatkan dengan mempelajari matematika, ini adalah yang terbaik yang dapat kita harapkan.
Namun, seperti yang dikatakan Mook (1983), validitas ekologis sering disalahpahami dan tidak diperlukan jika penelitian dirancang untuk menguji teori yang bertentangan dengan generalisasi langsung ke dunia nyata. Dalam penelitian psikologis, validitas ekologis sering dikompromikan demi validitas internal (tidak adanya variabel pengganggu). Hal ini memungkinkan hipopenelitian yang diturunkan dari teori diuji secara efektif. Sama sekali tidak mungkin untuk mengontrol semua variabel pengganggu dalam pengaturan dunia nyata (dan juga sulit untuk menemukan pengaturan dunia nyata yang sama dengan setiap kemungkinan pengaturan dunia nyata yang ingin Anda generalisasikan, Mook, 1983). Dengan secara akurat menguji hipopenelitian yang diturunkan dari sebuah teori dalam pengaturan buatan yang terkontrol, adalah mungkin untuk mendukung, menyangkal atau menyempurnakan teori itu, dan menggunakan teori tersebut untuk menjelaskan perilaku dunia nyata. Dalam penelitian ini, saya menguji TFD, dan teori itulah, bukan data saya, yang digeneralisasikan ke dunia nyata.
TFD berpendapat bahwa belajar matematika meningkatkan keterampilan penalaran umum.
Jika ini benar, maka kinerja pada tugas 'buatan' yang membutuhkan penalaran harus diubah sebagai bagian dari pengembangan payung.
Seperti yang dinyatakan sebelumnya validitas internal pada dasarnya adalah tidak adanya variabel asing pengganggu. Validitas internal yang tinggi berarti bahwa hubungan antara dua faktor dapat dianggap sebagai hubungan antara kedua faktor itu saja (Heiman, 2002). Jika sebuah penelitian memiliki validitas internal yang rendah, mungkin ada variabel asing yang belum dikendalikan yang mempengaruhi hubungan (membuat mereka variabel pengganggu). Cara terbaik untuk memastikan bahwa sebuah penelitian memiliki validitas internal yang tinggi adalah dengan menetapkan peserta secara acak ke dalam kondisi sehingga setiap variabel asing seimbang dan tidak dapat secara sistematis membiaskan hasil. Upaya perlindungan lainnya adalah mengukur variabel apa pun yang Anda ketahui mungkin merupakan faktor pengganggu sehingga Anda dapat mengontrolnya dalam analisis (Christensen, 2000).
Seperti yang telah dinyatakan, desain kuasi-eksperimental dari studi longitudinal berarti bahwa peserta tidak secara acak ditugaskan ke kondisi. Namun, ada kemungkinan bahwa kecerdasan merupakan faktor pembaur dalam penelitian ini – mungkin berbeda antara kondisi dan ini terkait dengan kemampuan penalaran. Untuk mengatasi masalah ini, kecerdasan akan diukur sehingga efeknya dapat dipertanggungjawabkan dalam analisis.
Validitas internal dapat dikompromikan oleh desain kuasi-eksperimental dari studi longitudinal. Namun, terlepas dari kenyataan bahwa validitas eksternal bisa dibilang tidak relevan karena penelitian ini menguji TFD daripada mencoba menggeneralisasi ke pengaturan dunia nyata secara langsung (Mook, 1983), ia memiliki validitas eksternal yang cukup tinggi karena manipulasi (studi matematika) sedang dilakukan 'di lapangan' daripada di laboratorium, dan karena berurusan dengan proses kognitif yang diyakini umum di seluruh manusia (Miller, 2011).