El castillo de los Ladrón de Vilanova, tambien llamado del duque de Calabria, formaba parte del cinturón amurallado que defendía la población.

Sus restos se asientan sobre un peñasco muy cerca del portal de Arriba; era de pequeñas dimensiones y aunque se encuentra muy arruinado aún puede identificarse su patio de armas, un cubo redondeado de su recinto y la torre del homenaje.

Esta es de planta rectangular, de 11 por 9 metros, construida en mampostería en sus dos tercios inferiores siendo el superior de piedra sillar; en la actualidad se encuentra recortada en altura y mutilada de detalles artísticos aunque en su interior se pueden apreciar algunas hornacinas y otros huecos sin valor arquitectónico.

Parte de su recinto se halla ocupado por viviendas tanto modernas como de una cierta antiguedad.

De la muralla que rodeaba la población quedan dos portales, los llamado de Arriba y de Abajo más algunos lienzos situados en las inmediaciones del primero.

- Portal de Arriba. Pudo ser un arco de acceso al vecino castillo. Es muy sencillo y está realizado en mampostería, con arcos rebajados tanto al interior como al exterior.

- Portal de Abajo. Construido en mampostería y situado consta de un arco de medio punto de sillería extramuros y otro rebajado al interior, situado entre dos imponentes torreones de planta cuadrada y remate almenado. En uno de estos se construyó una vivienda en el lado intramuros.