Del que fue el Castillo original no se conserva la estructura al completo. Partes importantes como la torre del homenaje o las almenas ya no forman parte de la estructura. Al interior del castillo se accede por una puerta corredera con arco semicircular en la que se pueden ver los escudos de dos de las familias más importantes de la villa: los Sarmiento y los Fajardo. En cuanto a la estructura defensiva, la muralla aún conserva tres de las cinco puertas que tenía originalmente. Estas son la Puerta Falsa, la Puerta Nueva y la Puerta de la Cerca, que es la que da entrada hacia el castillo.
Su estado actual es de bastante deterioro, aunque en unas obras de mantenimiento realizadas después de los años 2.000 se encontraron nuevas partes del castillo entre las que estaban un pozo artesanal, un aljibe y una escalinata.