Penelitian ini bertujuan untuk mengetahui efektivitas tes diagnostik four-tier multiple choice berbasis web dalam mengukur pemahaman dan level tingkat pemahaman siswa kelas XI IPA SMA Negeri 1 Teras Boyolali dan SMA Muhammadiyah 1 Simo Boyolali menggunakan four-tier multiple choice berbasis web dalam memahami materi larutan penyangga. Penelitian ini merupakan penelitian studi kasus deskriptif-kuantitatif. Penelitian ini dilaksanakan dengan tahap awal berupa studi awal, studi pustaka, menyusun indikator dan kisi-kisi, penyusunan instrumen, validitas instrumen, dan perbaikan instrumen. Tahap selanjutnya berupa pengumpulan data, pengolahan data, analisis data, dan kesimpulan. Objek dan subjek dalam penelitian yaitu instrumen tes diagnostik four tier dan kelas XI IPA SMA Negeri Teras dan SMA Muhammadiyah 1 Simo Boyolali Tahun Ajaran 2021/2022. Teknik pengumpulan data dengan tes, wawancara, dan dokumentasi. Validitas data menggunakan Iteman 4.3 dengan analisis menggunakan rasch model. Hasil penelitian menunjukkan bahwa instrumen tes diagnostik four tier lebih efektif mengukur tingkat pemahaman siswa daripada instrumen three tier dengan perbandingan persentase tingkat pemahaman yang terukur yaitu 73,5% dan 31,3%. Tingkat pemahaman siswa SMA Negeri 1 Teras Boyolali sebesar 81,14?lam kategori tinggi dan SMA Muhammadiyah 1 Simo 45,64?lam kategori rendah.