Validitas dan Reliabilitas Instrumen Pengukuran pada Matriks Multitrait-Multimethod

Dalam penelitian, peneliti sering kali menemukan kesulitan dalam mengukur variabel konstruk. Campbell dan Fiske (1959) memperkenalkan matriks multitrait-multimethod (MTMM) untuk mengevaluasi konstruk. Desain kuesioner sering kali digunakan setiap item kuesioner hanya satu metode pensekalaan ( misalnya, likert dengan skala 1-5) sehingga sumber variasi metode terhadap respons item tidak diperhitungkan. Saris dan Gallhoffer [13] mengatakan bahwa, different methods, different results yang artinya bahwa metode penskalaan (effek metode) sangat berpengaruh terhadap kualitas pengukuran. Scherpenzeel dan Saris [16] mengaplikasikan multitraits-multimethods (MTMM) untuk menghitung efek metode terhadap respons item kuesioner, juga reliabilitas, dan validitas. Tujuan makalah ini adalah mengukur reliabilitas, validitas, dan besarnya efek metode suatu traits. Contoh kasus dalam penelitian ini adalah tentang tingkat kepuasan mahasiswa terhadap proses belajar mengajar (PBM) staf pengajar di lingkungan FMIPA-Unjani prodi informatika dengan tiga buah traits dan tiga buah metode penskalaan. Penaksiran reliabilitas, validitas, dan efek metode digunakan pendekatan pemodelan struktural dan paket program LISREL Metode penaksiran digunakan kemungkinan maksimum. Hasilnya tidak sedikit ketidak konsistenan responden dalam menjawab kuesioner apabila hanya menggunakan satu metode penskalaan sehingga berpengaruh terhadap kualitas pengukuran.  Dalam hal ini berdasarkan validitas maka untuk kasus yang digunakan menggunakan tiga metode penskalaan untuk menghasilkan kualitas pengukuran yang lebih baik.