Consta de dos recintos de planta cuadrada , con torres redondas en los ángulos, salas palaciegas y un pozo en su interior y rodeado por un foso con puente de acceso de doble arco.
La Torre del Homenaje, posteriormente demolida y de la que sólo queda en pie uno de sus muros, se sitúa en uno de los ángulos del recinto interior.
Aparece en una leyenda de los Siete Infantes de Lara y fue residencia de varias familias nobles durante la Edad Media.Por el pasaron algunos monarcas como Carlos II y Felipe V.
Tras su abandono en el siglo XVIII, acabó siendo el cuartel d ela Guardia Civil de la localidad y allí nació Leonor Izquierdo, la que sería esposa del poeta, Antonio Machado.