El casco urbano de Manzanera se localiza junto a la margen izquierda del río Manzanera (tributario derecho del río Mijares), aguas abajo de la confluencia en este del río de Los Olmos y poco antes de la desembocadura del barranco de la Salada. Ocupa un pequeño rellano, que se corresponde con un retazo de terraza fluvial que enlaza con la base de la ladera de un relieve en cuesta. El castillo se localiza en el extremo meridional del casco urbano, sobre un pequeño espolón limitado por el cortado de la terraza y por una barranquera que desciende desde la zona del Portal Alto; la zona contigua a la plaza del Castillo es la más desprotegida, concentrándose en la misma los principales sistemas defensivos.
Uso del suelo: Inmueble sin uso conocido.
El castillo ocupa un pequeño espolón rocoso, que aflora por debajo de la terraza fluvial sobre la que se asienta el resto de la villa de Manzanera. Es por ello que en el contacto entre el espolón y la terraza se emplazan las principales estructuras defensivas. Es posible que en el espacio contiguo al castillo, por el que se extiende la actual plaza, existieran algún tipo de estructuras asociadas al castillo, como un foso que reforzase las defensas en ese sector.
El grueso de la fortificación se adapta al potente afloramiento rocoso del espolón, lo que le confiere una planta irregular al edificio.
La estructura más relevante es el muro que cierra la fortaleza por la plaza (muro noroccidental), y a cuyos pies pudo existir un foso, actualmente relleno e igualado con la explanada. Consta de dos fábricas o cuerpos bien diferenciados, que poseen un potente núcleo de cal y canto; el inferior está formado por un aparejo de piedras escuadradas, predominantemente de piedra caliza, algunas posiblemente reaprovechadas de fábricas anteriores, con sillares bien tallado en las esquinas; está trabado con mortero de cal, si bien se observan distintos rejuntados y en planta inferior un revestimiento continuo de yeso, de fechas posteriores a la construcción del paramento. En este cuerpo se abre una pequeña ventana que fue ensanchada en un momento no precisado a costa de perder parcialmente la jamba izquierda. El cuerpo superior es ligeramente más estrecho y está realizado mediante una fábrica de buena sillería de piedra arenisca, igualmente trabada con mortero de cal; en su parte central hay una pérdida importante del lienzo, favorecida por la existencia de un vano central de cierta entidad. El muro se prolonga por sus laterales, con menor altura y, posiblemente, espesor y peor conservado. Los paramentos visibles interiores son de mampostería y se encuentran parcialmente ocultos por un potente relleno de escombros; conservan varias capas de revestimientos y las trazas de múltiples vanos enmarcados con jambas de sillería; se identifican posibles puertas y ventanas flanqueadas con festejadores. Esta fábrica enlaza por el flanco meridional con otras estructuras, posiblemente anteriores, con un alineamiento ligeramente distinto y con refuerzos puntuales. Se trata de muros de mampostería regularizada con amplias esquinas de sillería en la que se entremezcla la piedra caliza y la arenisca y trazas de distintos vanos; en al menos un punto, se observa la existencia de un paño central de sillería de piedra arenisca.
En la parte posterior del edificio hay también restos de un torreón de planta circular, que enlazaría con la muralla que rodea la villa. La sala principal del castillo debía tener un cierto empaque, existiendo referencias a reuniones del Concejo, con el Prior del Convento de San Miguel de los Reyes a la cabeza, a lo largo del siglo XVI.
La torre del homenaje es de planta rectangular, de 11 por 9 metros, construida en mampostería en sus dos tercios inferiores siendo el superior de piedra sillar; en la actualidad se encuentra recortada en altura y mutilada de detalles artísticos aunque en su interior se pueden apreciar algunas hornacinas y otros huecos sin valor arquitectónico.
Parte de su recinto se halla ocupado por viviendas tanto modernas como de una cierta antigüedad.
La muralla delimitaba el casco antiguo de Manzanera; todo el flanco suroriental se localiza sobre el escarpe que separa la terraza fluvial de terraza subactual / curso fluvial, desde las proximidades del puente hasta el castillo y desde este hasta la zona de la carretera de Arcos de las Salinas (flanco meridional). En el resto del trazado (flancos suroccidental, noroccidental y nororiental) no existen unos límites topográficos tan definidos, coincidiendo con una suave vaguada por la que discurre la travesía urbana de la carretera A-1514.
El recinto amurallado es un conjunto complejo de estructuras, integrado por elementos de distinto tipo, entre las que podemos destacar:
- Portales y postigos: destinados a comunicar la villa con el exterior, su disposición se encuentra perfectamente asociada al trazado de los viales; se tiene constancia de cinco portales y dos posibles postigos:
*Portal de Abajo (plaza Portal de Abajo nº 6 y 7). Es considerada como la estructura más relevante del recinto amurallado y protegía el acceso desde el flanco norte. Se trata de un portal flanqueado por sendos torreones de planta cuadrada. El vano del portal se abre extramuros con un arco ligeramente apuntado e intramuros con un arco rebajado; dichos arcos y las jambas del vano están realizados con sillería; las dos torres que lo flanquean poseen fábrica de mampostería con sillares en las esquinas, trabado con cal; están coronados con almenas, al igual que el paño que se alza sobre el portal. Intramuros ambos torreones constan de dos pisos, el inferior abría, en el de la izquierda, a modo de arco de medio punto dovelado, y el de la derecha, en falso arco formado por aproximación de hiladas; el piso superior presenta abierto el hueco interior de los torreones para un mejor acceso desde el interior en caso de ataque.
*Portal de Arriba (calle Portal de Arriba, nº 3-4): Antigua torre-puerta desmochada, de la que solo se conserva su base, bastante transformada. Se trata de una fábrica de sillería, trabada con cal. Al exterior transciende en forma de arco rebajado, fruto de una remodelación posterior, mientras que el paso y la cara intramuros está formado por una bóveda rebajada.
*Otros portales: hay evidencias urbanísticas, corroboradas por fuentes orales, de la existencia de otros tres portales, cuyos restos no transcienden al exterior. Dos de ellos se localizan en ambos extremos de la calle Doctor Gil, uno junto a la carretera (a la altura de C/ Doctor Gil nº 1 y del medianil entre C/ Doctor Gil nº 2 y trasera de la Avenida Tomás María nº 23) y otro junto a la calle que circunvala el casco urbano por el río (C/ Doctor Gil nº 18 y medianil C/ Doctor Gil nº 23 - C/ Arrabal nº 34). Y el tercer portal se localizaba a la altura de la plaza del Rincón nº 10 y 12.
*Posibles postigos: Se ha detectado la ubicación de dos posibles postigos, cuya estructura no transciende al exterior y que requeriría de una intervención arqueológica que corroborara su presencia. El primero de ellos se podría situar en la zona de unión de la plaza del Castillo con la calle Arrabal, mientras que el segundo se debía situar a la salida de la calle San Antonio.
- Torres. En la actualidad son visibles los restos de dos torreones de planta circular, además de las torres de planta cuadrada que flanquean el Portal de Abajo y los restos de la torre-puerta del Portal de Arriba. El de la calle Arrabal (en la parte posterior de C/ Mayor nº 24) es un potente cubo de mampostería regularizada trabada con cal, que debía tener un gran alzado. El segundo torreón circular se encuentra en la zona de unión de la calle Portal Alto con el flanco occidental del Castillo. También se han detectado evidencias fotográficas y catastrales de la existencia de otros torreones, en este caso de planta cuadrada, si bien requieren de una verificación de carácter arqueológico.
- Lienzos y antemurales: se detecta la presencia de diversos lienzos de muralla asociados a las torres y portales conservados, todos parcialmente transformados y realizados con fábrica de mampostería regularizada, trabada con posible argamasa de cal. Además de estas evidencias visibles, es altamente probable que se conserven otros lienzos en las medianeras de las casas existentes entre la Avenida Tomás Muñoz y las calles Modesto Muñoz, Duque y Plaza del Rincón y entre la Avenida Ingeniero Piqueras y las calles Doctor Andrés Guevara y Plaza del Sol