Analisa kualitas tes potensi pada ujian tulis UM UGM tahun 2007

HARYANTO, Sugiyanto,ph.D

2008 | Tesis | S2 Magister Psikologi

Penelitian ini bertujuan untuk mengetahui kualitas tes potensi pada Ujian tulis Masuk Universitas Gadjah Mada (UM UGM) tahun 2007, melalui pendekatan teori klasik dan pendekatan teori respon aitem. Selain itu juga dikaji ada tidaknya bias aitem pada tes potensi dengan mencari aitem-aitem yang terdeteksi Differential Item Functioning (DIF) berdasarkan kelompok peserta tes jawa dan luar jawa. Objek penelitian ini adalah tes potensi yaitu serangkaian tes yang digunakan untuk mengungkap kemampuan dasar individu dalam belajar. Tes ini terdiri dari 60 aitem dengan lima pilihan jawaban, yang mengungkap 3 aspek kemampuan yaitu ; verbal, kuantitatif dan penalaran. Penelitian ini dilakukan dengan menggunakan data berupa respon atau jawaban peserta ujian tulis UM UGM tahun 2007 pada bagian tes potensi. Jumlah populasi dalam penelitian ini adalah 29.234 orang, dan diambil 3000 orang sebagai sampel. Subyek terdiri dari 1500 peserta yang berasal dari pulau jawa dan 1500 peserta berasal dari luar pulau jawa.. Hasil analisis aitem dengan menggunakan teori klasik menunjukkan bahwa tes potensi UM UGM 2007 memiliki reliabilitas alpha sebesar 0,840. Dengan melihat parameter tingkat kesukaran aitem, daya pembeda dan efektivitas pengecoh diperoleh kesimpulan bahwa 30 aitem bekerja dengan baik, 22 aitem perlu direvisi, dan 8 aitem gugur. Berdasarkan analisis dengan pendekatan teori respon aitem diperoleh data 43,33% aitem termasuk sukar, 55% aitem masuk kategori sedang dan 1,67% termasuk kategori mudah. Sementara itu dalam analisis bias aitem yang dilakukan, terdapat 3 aitem yang terdeteksi DIF. Secara umum dapat disimpulkan bahwa tes potensi UM UGM 2007 memiliki kualitas yang memadai, namun masih perlu perbaikan terutama dalam hal efektifitas pengecoh. Tes potensi juga memiliki bias aitem yang rendah, sehingga aitem-aitem yang ada tidak terlalu memihak atau menguntungkan kelompok tertentu dari peserta tes UM UGM 2007.

This Study was aimed at examining characteristics of Gadjah Mada University selection test (UM UGM), especially general test, based on classical true-score theory (CTT) and item response theory (IRT) approach. Characteristic item of selection test based on CTT include dificulty level, discrimination, and distructor efectivity. In IRT approach, characteristic item include difficulty level, discrimination, pseudo-chance level, goodness of fit and differential item functioning (DIF). Sample of the study were consist of 3000 answer sheet and the population were 29234 answer sheet from student candidate of Gadjah Mada University academic year 2007. An object of this study was General Test what divided into 3 subtest; (1) Verbal, (2) Quantitative, and (3) Reasoning. This test formed 60 item which 4 distructors and only 1 key. To analyse this data, ITEMAN program used to items analysis based on CTT approach, and ASCAL used to IRT approach. The items bias analyzed by BILOG program. The results of the analysis is (1) In CTT approach, reliability of test by alpha is 0,840, (2) with CTT methods, only 50% of item is good, 36,67% must be revised, and 13,33% rejected, (3) with IRT methods,38,33% item is good, 33,33% moderate, and 28,33% is bad; and (4) in detecting DIF was funded 3 item.

Kata Kunci : teori klasik, teori Respon Aitem, DIF, bias aitem, tes potensi, item analysis , CTT, IRT