Huruf Jawa adalah huruf tradisional yang masih digunakan di Jawa terutama daerah Solo dan Jogjakarta. Penelitian terhadap huruf Jawa masih berlanjut baik untuk membaca huruf Jawa kuno maupun modern. Terutama untuk tulisan tangan, karena terdapat perbedaan gaya tulis sehingga sulit dibaca. Dengan menggunakan pengolahan citra dan jaringan saraf tiruan pengenalan huruf Jawa dapat dilakukan. Penelian sebelumnya pernah dilakukan pada huruf cetak. Pada penelitian ini akan dibuat convolutional neural network untuk mengenali tulisan tangan huruf Jawa. Jaringan akan dilatih menggunakan data sebanyak 10601 huruf Jawa dasar. Eksperimen dilakukan dengan beberapa variasi, pertama menggunakan data normal, kedua menggunakan data augmentasi, ketiga menggunakan kernel lebih banyak dan keempat adalah pelatihan dengan jumlah epoch berbeda. Hasil penelitian menunjukan pelatihan menggunakan kernel lebih banyak menghasilkan jaringan dengan akurasi tinggi. Jaringan CNN mampu mengenali huruf Jawa pada sampel uji dengan akurasi mencapai 97,5%.

Kata kunci : aksara Jawa, Convolutional neural network, Pengenalan huruf ,tensor flow