Tujuan penelitian ini adalah (1) untuk mengetahui kualitas soal obyektif tes akhir semester genap, (2) mengetahui tingkat kesukaran, (3) mengetahui daya beda,(4) mengetahui fungsi distraktor, (5) mengetahui validitas tes obyektif, (6) mengetahui reliabilitas tes obyektif materi bahasa Arab di kelas VIII MTs Negeri 1 Semarang.
Populasi pada penelitian ini adalah semua siswa kelas VIII MTs Negeri 1 Semarang yang mengikuti tes bahasa Arab pada ujian akhir semester genap tahun pelajaran 2010/2011, dan jumlah siswanya ada 289 , terbagi atas delapan kelas. Sampel yang diambil dari populasi adalah siswa kelas VIII ( kelas A,B, dan C) MTs Negeri 1 Semarang yang jumlahnya ada 100 siswa.
Hasil penelitian ini menggunakan metode dokumentasi terhadap hasil pembelajaran siswa kelas VIII MTs Negeri 1 Semarang, yaitu dari segi kualitas soal obyektif tes akhir semester genap materi bahasa Arab di kelas VIII MTs Negeri 1 Semarang tahun pelajaran 2010/2011 menunjukkan hasil tidak baik. Dari segi tingkat kesukaran tes, berdasarkan atas perhitungan tingkat kesukaran dan kemudahan soal, diketahui (1) butir soal atau sekitar (2,5%) sulit, (12) butir soal atau sekitar (30%) sedang, 27 butir soal atau sekitar (67,5%) mudah. Dan peneliti menyimpulkan bahwa soa-soal dari tes tes akhir semester genap menunjukkan koefisien tingkat kesukaran yang mudah. Dari segi daya beda soal, berdasarkan perhitungan daya beda soal, diketahui bahwa (3) butir soal atau sekitar (7,5%) istimewa, (13) butir soal atau sekitar (32,5%) baik, (8) butir soal atau sekitar (20%) sedang dan (16) butir soal atau sekitar (40%) lemah. Peneliti menyimpulkan bahwa daya beda soal dari tes akhir semester genap menunjukkan koefisien daya beda yang baik. Dari segi fungsi distraktor dari pilihan ganda butir tes, berdasarkan perhitungan fungsi distraktor, diketahui bahwa (11) soal atau sekitar (27,5%) baik, (29) soal atau sekitar (72,5%) tidak baik. Dan peneliti menyimpulkan bahwa soal dari tes akhir semester genap menunjukkan koefisian fungsi distraktor yang tidak baik. Dari segi koefisien validitas tes, hasil analisis soal obyektif tes akhir semester genap, berdasarkan atas tabel koefisien validitas tes diketahui bahwa (37) butir soal atau sekitar ( 92,5%) valid, dan (3) butir soal atau sekitar ( 7,5%) tidak valid. Dan dari segi koefisien reliabilitas tes, berdasarkan perhitungan koefisien reliabilitas tes, diketahui bahwa dan tabel r = 0,70. Karena tabel r maka dikatakan bahwa tes tersebut reabel (tetap/ajeg).