Definisi
Siswa Satu: Saya senang ini sudah berakhir. Ini adalah akting yang menegangkan dan dievaluasi oleh tiga guru.
Siswa Dua : Saya setuju. Saya juga prihatin tentang bagaimana masing-masing guru akan menilai kita. Saya harap mereka menggunakan kriteria yang sama!
Siswa Satu: Oh, maksud Anda keandalan skor. Apakah Anda tahu keandalan?
Siswa Dua : Tidak juga. Saya belum pernah menggunakan istilah itu sebelumnya.
Siswa Satu : Aduh! Saya akan menjelaskan!
Keandalan didefinisikan sebagai sejauh mana penilaian menghasilkan informasi yang konsisten tentang pengetahuan, keterampilan, atau kemampuan yang sedang diuji. Asesmen yang reliabel dapat direplikasi, artinya akan menghasilkan skor atau pengamatan kinerja siswa yang konsisten.
Misalnya, penampilan menyanyi kita harus menghasilkan skor yang sama dari ketiga guru. Jika satu guru memberi kami skor 10 dari 10 dan yang lain memberi kami skor 2 dari 10, skor tersebut dianggap tidak dapat diandalkan.
Siswa Dua : Oh, baiklah. Jadi nampaknya banyak faktor yang dapat mempengaruhi reliabilitas suatu tes atau kinerja.
Siswa Satu: Anda benar.
Kondisi yang Mempengaruhi Keandalan
Siswa Satu: Ada banyak kondisi yang mempengaruhi reliabilitas. Mereka termasuk:
- Perubahan harian pada siswa (seperti tingkat energi, motivasi, stres emosional, dan kelaparan)
- Lingkungan fisik (termasuk suhu kelas, kebisingan eksternal, dan gangguan)
- Administrasi penilaian (termasuk perubahan petunjuk tes dan perbedaan cara guru menjawab soal pada tes)
- Durasi pengujian (umumnya, semakin lama pengujian, semakin rendah reliabilitasnya)
- Subjektivitas pemberi skor tes
Ukuran reliabilitas: koefisien reliabilitas
Siswa Dua: Jadi bagaimana Anda mengukur reliabilitas?
Siswa Satu: Keandalan ditentukan dengan membandingkan dua set skor untuk penilaian tunggal (seperti dua skor penilai untuk orang yang sama) atau dua skor dari dua tes yang menilai konsep yang sama. Kedua skor ini dapat diturunkan dengan cara yang berbeda tergantung pada jenis reliabilitas yang dinilai.
Setelah kami memiliki dua set skor untuk sekelompok siswa atau pengamat, kami dapat menentukan seberapa mirip mereka dengan menghitung statistik yang dikenal sebagai koefisien reliabilitas.
Koefisien reliabilitas adalah indeks reliabilitas numerik, biasanya berkisar antara 0 hingga 1. Angka yang mendekati 1 menunjukkan reliabilitas yang tinggi. Koefisien reliabilitas yang rendah menunjukkan lebih banyak kesalahan dalam hasil tes, biasanya karena faktor temporal yang telah kita bahas sebelumnya. Keandalan dianggap baik atau dapat diterima jika koefisien reliabilitas adalah 0,80 atau lebih.
jenis keandalan
Siswa Satu: Ada beberapa jenis reliabilitas.
Keandalan antara
Dengan kata lain, apakah orang yang berbeda menilai kinerja siswa dengan cara yang sama? Jenis reliabilitas ini digunakan untuk menilai sejauh mana pengamat atau penilai yang berbeda memberikan estimasi atau skor yang konsisten. Misalnya, kami tampil di depan tiga guru yang menilai kami secara individu. Keandalan interrater yang tinggi akan menunjukkan bahwa setiap guru menilai kami dengan cara yang sama.
Reliabilitas Tes Ulang
Ini digunakan untuk mengevaluasi konsistensi skor evaluasi dari satu momen ke momen lainnya. Konstruk yang akan diukur tidak berubah, hanya waktu penilaian yang berubah. Misalnya, jika kita diberi tes sains hari ini dan kemudian tes yang sama minggu depan, kita dapat menggunakan skor tersebut untuk menentukan reliabilitas tes ulang. Reliabilitas test-retest paling baik digunakan untuk menilai hal-hal yang stabil dari waktu ke waktu, seperti kecerdasan. Keandalan biasanya lebih tinggi ketika ada waktu singkat antara administrasi tes.
Keandalan Bentuk Paralel
Jenis reliabilitas ini ditentukan dengan membandingkan dua penilaian berbeda yang dibangun menggunakan domain konten yang sama. Misalnya, jika guru sains kita membuat tes dengan 100 pertanyaan yang mengukur konten sains yang sama, dia akan membagi tes tersebut menjadi dua versi dengan masing-masing 50 pertanyaan, lalu memberikan dua versi tes kepada siswanya. Dia akan menggunakan skor versi 1 dan skor versi 2 untuk menilai keandalan formulir paralel.
Reliabilitas Konsistensi Internal
Bentuk reliabilitas ini digunakan untuk menilai konsistensi skor di seluruh item pada satu tes. Misalnya, jika guru sains kita ingin menguji reliabilitas konsistensi internal dari pertanyaan tesnya tentang metode ilmiah, dia akan memasukkan banyak pertanyaan tentang konsep yang sama. Konsistensi internal yang tinggi akan menghasilkan semua pertanyaan metode ilmiah dijawab dengan cara yang sama. Namun, jika respon siswa terhadap pertanyaan tersebut tidak konsisten, reliabilitas konsistensi internal rendah.
Peningkatan keandalan penilaian kelas
Siswa Satu: Pendidik dapat meningkatkan atau meningkatkan keandalan penilaian mereka.
- Mereka mungkin memberikan beberapa tugas atau pertanyaan serupa dalam penilaian untuk mencari konsistensi dalam kinerja siswa.
- Mereka harus mendefinisikan setiap tugas dengan jelas sehingga faktor waktu, seperti instruksi tes, tidak mempengaruhi kinerja.
- Jika memungkinkan, pendidik harus menghindari menilai pembelajaran dan kinerja siswa saat mereka sakit atau saat ada faktor eksternal, seperti kebisingan yang tidak terkendali di dalam kelas.
- Cara terakhir untuk meningkatkan keandalan penilaian kelas adalah bagi pendidik untuk mengidentifikasi kriteria konkret tertentu dan menggunakan rubrik untuk menilai kinerja siswa.
Ringkasan Pelajaran
Reliabilitas memastikan konsistensi skor atau pengamatan kinerja siswa. Faktor temporal eksternal dan internal dapat mempengaruhi reliabilitas, seperti perubahan harian siswa, faktor lingkungan fisik, dan subjektivitas penilai.
Reliabilitas diukur melalui koefisien reliabilitas dengan rentang indeks numerik dari 0 sampai 1. 1 menunjukkan reliabilitas tinggi, sedangkan 0 menunjukkan kurang. Jenis reliabilitas yang berbeda ( inter- rater , test-retest , parallel forms , dan konsistensi internal ) mengukur aspek yang berbeda, tetapi semuanya menggunakan rentang koefisien reliabilitas standar. Umumnya, reliabilitas 0,80 atau lebih tinggi menunjukkan reliabilitas yang baik atau sedang.
hasil pembelajaran
Setelah melihat pelajaran ini, Anda harus dapat:
- Tentukan keandalan dan buat daftar kondisi yang memengaruhinya
- Jelaskan bagaimana reliabilitas diukur dan bagaimana reliabilitas dapat ditingkatkan dalam penilaian.
- Identifikasi dan jelaskan jenis-jenis reliabilitas