Penelitian ini bertujuan untuk mengetahui kualitas butir soal Penilaian Akhir Semester (PAS) Mata Pelajaran Kimia Kelas XI SMA Negeri 1 Sragen Tahun Ajaran 2019/2020 ditinjau dari validitas, reliabilitas, tingkat kesukaran, daya beda dan keefektifan pengecohnya.
Penelitian ini merupakan penelitian deskriptif kuantitatif. Teknik pengumpulan data pada penelitian ini menggunakan metode dokumentasi dengan menganalisis jawaban 280 siswa pada 25 soal PAS mata pelajaran kimia menggunakan program Iteman versi 3.00.
Hasil penelitian menunjukkan bahwa soal Penilaian Akhir Semester (PAS) Mata Pelajaran Kimia Kelas XI SMA Negeri 1 Sragen Tahun Ajaran 2019/2020 belum berkualitas baik. (1) Validitas soal menunjukkan bahwa soal yang dinyatakan valid berjumlah 24 butir soal (96%) dan soal yang dinyatakan tidak valid berjumlah 1 butir soal (4%) sehingga ditinjau dari segi validitas soal dikatakan baik. (2) Reliabilitas soal sebesar 0,756 dimana termasuk soal yang reliabel atau memiliki reliabilitas yang tinggi. (3) Daya beda soal menunjukkan bahwa soal memiliki daya beda yang berkualitas baik hal ini dapat dilihat dari 25 soal sebanyak 6 butir soal (24%) mempunyai daya beda kategori jelek, 6 butir soal (24%) mempunyai daya beda kategori sedang dan 13 butir soal (52%) mempunyai daya beda kategori baik. (4) tingkat kesukaran menunjukkan bahwa soal memiliki tingkat kesukaran yang tidak baik dimana terdapat sebanyak 16 butir soal (64%) dengan tingkat kesukaran soal kategori mudah, 8 butir soal (32%) dalam kategori sedang, dan 1 butir soal (4%) dalam kategori sukar. (5) Keefektifan pengecoh menunjukkan bahwa soal merupakan kategori cukup. Hal ini dapat diketahui hasil analisa dari 25 butir soal terdapat 5 butir soal (20%) dalam kategori tidak baik, 7 butir soal (28%) dalam kategori kurang baik, 5 butir soal (20%) dalam kategori cukup, 4 butir soal (16%) dalam kategori baik dan 4 butir soal (16%) dalam kategori sangat baik.

Kata kunci : Analisa butir soal, penilaian akhir semester, validitas, reliabilitas, daya beda soal, tingkat kesukaran