Huruf isyarat merupakan bahasa yang digunakan oleh tuna rungu wicara untuk berkomunikasi, akan tetapi masih banyak masyarakat yang belum mengerti huruf isyarat, oleh karena itu dibutuhkan sistem pengenalan huruf isyarat. Pada penelitian ini dibangun sistem pengenalan huruf isyarat menggunakan metode ekstraksi ciri Local Binary Patterns (LBP) yang kemudian diklasifikasikan menggunakan classifier k-Nearest Neighbour (KNN) dan Support Vector Machine (SVM). Metode LBP dipilih pada sistem pengenalan huruf isyarat dikarenakan handal dalam melakukan analisis tekstur [1], mengatasi scaling dan citra yang kabur [2].Dan proses klasifikasi dengan Metode KNN dipilih karena implementasinya yang sederhana [3]. Sedangkan metode SVM dipilih karena handal dalam mengklasifikasikan data. Pada Tugas Akhir ini F1-Score yang didapat mencapai 99,84%.