摘要:Penelitian ini bertujuan untuk mengetahui banyaknya dimensi perangkat tes UAN Matematika tahun 2003, 2005, dan 2006. Dalam penelitian ini, yang dimaksud dengan dimensi adalah subkemampuan yang ada dalam kemampuan matematik. Penelitian ini bersifat deskriptif eksploratif. Data utama penelitian ini adalah respon siswa peserta Ujian Akhir Nasional yang ada di Provinsi D.I. Yogyakarta. Jumlah lembar jawaban siswa yang dianalisis sebanyak 2700 untuk tahun 2003, 3400 untuk tahun 2005, dan 3020 untuk tahun 2006. Respon siswa diambil dari SMP kelompok tinggi, sedang, dan rendah. Data dianalisis menggunakan teknik analisis faktor eksploratori, kemudian diestimasi banyaknya muatan dimensi/faktor dalam perangkat tes. Disimpulkan bahwa perangkat tes UAN Matematika tahun 2003, 2005, dan 2006 mengukur 3 dimensi subkemampuan yakni aljabar, geometri, dan pengukuran. Perangkat tes tersebut, hanya mampu menjelaskan sekitar 35% atau sekitar sepertiga varians kemampuan matematika siswa. Terkait dengan hal ini, pengembang tes UAN mata pelajaran matematika perlu mengusahakan agar menambah faktor dan variasi tingkat kesulitan butir tes, sehingga tes lebih dapat menjelaskan variansi kemampuan peserta tes. Sebaliknya bagi praktisi, sebaiknya memanfaatkan hasil penelitian ini untuk umpan balik dalam pembelajaran matematika di sekolah. Kata kunci: validasi dimensionalitas