Sampel yang Dipilih Sendiri dan Kepuasan 92 Persen
Tim asesor tiga orang melakukan asesmen lapangan selama 1,5 hari pada institusi dengan tiga lokasi kampus: Jakarta, Bekasi, dan Serang. Populasi mencakup 1.240 mahasiswa aktif, 86 dosen, dan 240 alumni dua tahun terakhir. Jadwal wawancara mahasiswa disusun oleh prodi: 15 peserta, seluruhnya pengurus BEM, penerima beasiswa, dan mahasiswa semester 8. Kuesioner kepuasan disebar melalui grup WhatsApp angkatan dan memperoleh 118 respons dari 1.240 mahasiswa (9,5%), dengan klaim 92% puas. Tracer study dikelola staf prodi; response rate dilaporkan 78%, tetapi asesor hanya menerima rekap PDF tanpa data mentah dan tanpa instrumen. Observasi kelas dijadwalkan di dua kelas yang menurut kaprodi sudah biasa dikunjungi tamu. Kampus Serang hanya dikunjungi tiga jam karena jadwal penerbangan. Dalam draf laporan, ketua tim ingin menulis bahwa kepuasan mahasiswa tinggi dan lulusan terserap cepat.
1. Nilai validitas sampel dan instrumen di atas, lalu rancang tindakan koreksi yang realistis dalam 1,5 hari.
Read the worked answer
Diagnosis.
- Wawancara mahasiswa: peserta dipilih prodi dan homogen (pengurus, penerima beasiswa, semester 8). Ini purposive sampling dengan risiko bias seleksi tinggi; hasilnya tidak mewakili 1.240 mahasiswa.
- Kuesioner: response rate 9,5% dengan sebaran lewat grup angkatan menghasilkan nonresponse bias besar; klaim 92% puas hanya berlaku untuk 118 responden, bukan populasi.
- Tracer study: 78% dilaporkan tanpa data mentah, definisi kerja, atau instrumen. Angka tidak dapat diaudit.
- Observasi kelas: kelas yang disiapkan menghasilkan data observasi yang tidak alami.
Koreksi yang bisa dilakukan.
- Minta daftar hadir atau ekspor SIAKAD, lalu pilih sendiri 12-15 mahasiswa secara acak berlapis per angkatan dan per kampus; wawancara tanpa kehadiran dosen.
- Minta jadwal kuliah lengkap dan pilih dua kelas secara acak, termasuk kelas sore bila ada, untuk observasi singkat.
- Minta data mentah tracer, instrumen, definisi bekerja dan masa tunggu, serta tanggal survei; bila tidak diberikan, turunkan tingkat keyakinan temuan.
- Untuk kampus Serang yang hanya tiga jam, fokus pada verifikasi dokumen dan empat sampai lima wawancara singkat, lalu dokumentasikan keterbatasannya.
Dokumentasi. Catat setiap perubahan metode dan alasannya di kertas kerja. Penyimpangan dari rencana asesmen harus terlihat, bukan disembunyikan, agar hasil dapat dipertanggungjawabkan.
2. Bagaimana Anda merumuskan kesimpulan agar tidak overclaim? Tunjukkan kalimat laporan yang dapat dipertanggungjawabkan dan triangulasi yang dipakai.
Read the worked answer
Prinsip. Kesimpulan hanya sekuat buktinya. Sebutkan sumber, jumlah, response rate, dan batasan dalam satu tarikan napas dengan klaimnya.
Triangulasi. Bandingkan minimal tiga sumber: data SIAKAD, absensi, dan nilai; wawancara mahasiswa yang dipilih acak; observasi kelas; serta dokumen survei dan tracer. Bila arahnya konsisten, klaim dapat dibuat dengan kualifikasi; bila berbeda, tulis perbedaannya, bukan meratakannya.
Contoh kalimat yang dapat dipertanggungjawabkan. Dari 118 respons kuesioner (9,5% dari 1.240 mahasiswa), 92% menyatakan puas; karena response rate rendah dan sebaran responden tidak diketahui, hasil ini tidak dapat digeneralisasi ke seluruh populasi mahasiswa. Wawancara dengan 14 mahasiswa yang dipilih acak mengarah pada tema yang sama, terutama ketersediaan dosen pembimbing, tetapi keluhan administratif muncul di kampus Serang.
Yang harus dihindari. Kalimat kepuasan mahasiswa tinggi tanpa angka, atau lulusan terserap cepat tanpa data mentah tracer. Keduanya mudah dibantah pada uji keberatan.
Permintaan pasca-kunjungan. Data mentah tracer, instrumen kuesioner, daftar sampel, dan log kontak, dengan tenggat jelas. Bila tidak dipenuhi, tulis sebagai keterbatasan bukti dan pertimbangkan dampaknya pada skor kriteria terkait, bukan mengisi skor berdasarkan kesan.