Evaluasi pembelajaran memiliki peran penting dalam mencapai tujuan pendidikan nasional. Akibat ditiadakannya ujian nasional menyebabkan syarat kelulusan peserta didik sepenuhnya ditentukan oleh solah dengan melaksanakan ujian madrasah. Penelitian ini adalah menganalisis karakteristik HOTS pada soal ujian madrasah. Tujuan penelitian ini untuk mengetahui karakteristik beserta indikator pada tipe soal High Order Thinking Skills (HOTS) dalam Ujian Madrasah Mata Pelajaran Fisika tahun 2021/2022. Metode penelitian yang digunakan adalah penelitian deskriptif dengan analisis dokumen. Teknik pengumpulan data berupa wawancara dan angket rubrik penilaian. Analisis soal dilakukan menggunakanan angket rubrik penilaian berskala likert kemudian divalidasi pada wawancara dengan guru.
Hasil analisis menunjukkan sebanyak 63% dari 35 butir soal yang dianalisis tergolong dalam kategori HOTS. Tipe soal HOTS tersebut didominasi oleh karakteristik kemampuan berpikir tingkat tinggi. Uji validitas pada tingkat kesukaran soal mendapatkan hasil sebanyak 0% soal berkategori mudah, 91% soal berkategori sedang, dan 9% soal berkategori sukar. Daya beda soal berkategori negatif sebanyak 6 soal, kategori tidak baik sebanyak 16 soal, cukup baik sebanyak 6 soal, baik sebanyak 7 soal, dan sangat baik sebanyak 0 soal.
Penelitian ini diharapkan memberikan kontribusi dalam memperkuat pembelajaran di Madrasah Aliyah dengan memberikan pemahaman tentang karakteristik soal HOTS dalam Ujian Madrasah. Dengan pemahaman tersebut, diharapkan guru dapat mengembangkan strategi pengajaran yang lebih fokus pada pengembangan keterampilan berpikir tingkat tinggi pada siswa.