Ujian Masuk Perguruan Tinggi Negeri (UMPTN), sebagai alat seleksi yang baik, telah teruji keandalan dan kesahihannya. Namun, hasil penelitian Masoem (1997b) tentang hasil tes bahasa Indonesia dalam UMPTN memperlihatkan bahwa mata ujian bahasa Indonesia kurang memadai sebagai alat seleksi. Objek penelitian ini adalah tes bahasa Indonesia dalam UMPTN tahun 1995-1999 dengan anggapan bahwa Kurikulum SMU tahun 1994 telah diterapkan di dalam UMPTN mulai tahun 1995. Penelitian ini bertujuan mengetahui apakah soal bahasa Indonesia dalam UMPTN memenuhi syarat sebagai alat ukur yang baik. Untuk mengetahui hal itu ditelili kadar keandalan tes bahasa Indonesia dalam UMPTN yang berkaitan dengan keefektifan soal, terutama tingkat kesulitan soal, daya beda soal, dan berfungsi tidaknya kelima pilihan dalam soal bentuk pilihan ganda dengan lima pilihan itu. Kesesuaian soal dengan kisi-kisi, sebagai penjabaran kurikulum, dan kesesuaiannya dengan kaidah penggunaan bahasa Indonesia ragam baku merupakan hasil kajian kesahihan isi, sedangkan kejelasan kadar kesahihan konstruk itu dapat menunjukkan bahwa tes bahasa Indonesia mengukur kemampuan yang ditetapkan oleh UMPTN. Melalui penelitian lapangan terbukti bahwa tes bahasa Indonesia dalam UMPTN berkadar keandalan yang rendah dan berkadar kesahihan konstruk yang sedang. Kadar keandalan yang rendah itu menghasilkan 75% soal tidak dapat membedakan peserta tes yang berkemampuan tinggi dan peserta tes yang berkemampuan rendah. Soal yang berkemampuan seperti itu juga menghasilkan soal yang satu hingga tiga pengelirunya tidak berfungsi dengan baik. Dengan demikian, tes bahasa Indonesia dalam UMPTN tahun 1995-1999 kurang baik sebagai alai ukur. Pengkajian kesesuaian soal dengan kisi-kisi menunjukkan bahwa kisi-kisi pengetahuan bahasa, terutama tata kata, tata kalimat, dan tata makna, merujuk pada Tata Bahasa Rujukan Bahasa Indonesia (1991), sedangkan kisi-kisi keterampilan berbahasa tidak jelas rujukannya. Kisi-kisi keterampilan berbahasa yang tidak jelas rujukannya itu mengakibatkan adanya soal yang tidak menguji keterampilan berbahasa. Selain itu, kisi-kisi, terutama perinciannya, pada lima kali penyelenggaraan UMPTN, tidak pernah diganti atau diubah.