Pengukuran kemampuan merupakan salah satu dari sekian faktor yang sangat menentukan keberhasilan pendidikan. Mengukur kemampuan khususnya kemampuan pemecahan masalah dapat dilakukan dengan berbagai cara salah satunya dengan memberikan tes. Oleh karena itu, penelitian ini bertujuan untuk menghasilkan instrumen penilaian kemampuan pemecahan masalah matematis SMP yang valid dan reliabel.  Jenis penelitian ini adalah penelitian dan pengembangan (research and development) dengan model pengembangan Four-D yang terdiri dari empat tahap, yaitu: 1) pendefinisian, 2) perencanaan, 3) pengembangan, dan 4) pendesiminasian. Subyek penelitian yaitu 280 siswa kelas VIII Sekolah Menengah Pertama. Instrumen penilaian terdiri dari bidang materi aljabar, bilangan, dan geometri. Instrumen yang telah disusun divalidasi oleh para ahli dan diperoleh indeks Aiken. Data yang diperoleh  dianalisis menggunakan analisis faktor konfirmatori.  
Hasil penelitian disimpulkan bahwa: 1) instrumen penilaian pemecahan masalah matematis sekolah menengah pertama materi aljabar, bilangan, dan geometri memenuhi kriteria valid berdasarkan validasi konsruk melalui perhitungan aplikasi Lisrel dan valid berdasarkan validasi isi setelah divalidasi oleh ahli materi, ahli penilaian, dan ahli bahasa. 2) instrumen penilaian kemampuan  pemecahan masalah matematis sekolah menengah pertama reliabel. Estimasi reliabilitas aljabar 0,98; bilangan 0,98; dan  geometri 0,98. 3) instrumen  penilaian kemampuan pemecahan masalah matematis sekolah menengah pertama memiliki butir soal yang baik dengan perolehan indeks daya beda dan tingkat kesukaran yang baik. 

Kata kunci : instrumen  penilaian,  kemampuan  pemecahan  masalah matematis,   aljabar, bilangan, geometri.