El palacio se encuentra en el ángulo meridional, y más destacado, de la plaza de la Seo. En el momento de su edificación la plaza albergaba las casas de varios miembros del cabildo catedralicio; se trataba de un espacio urbano en plena expansión, que resultaba idóneo para testimoniar la posición social de una familia poderosa recién instalada en Tarazona.

En su momento el palacio se construyó en un entorno de huertas y jardines, contexto que tipológicamente lo sitúa a medio camino entre un palacio urbano y una residencia suburbana.

El conjunto palacial está formado por diferentes edificios y estructuras arquitectónicas independientes entre sí, distribuidas en torno a un gran patio cuadrado que organiza el espacio construido.

El elemento más monumental del conjunto es el edificio situado en el costado este, que da a la plaza de la Seo. Está construido en ladrillo (a diferencia del resto, que fueron realizados en tapial). Consta de planta baja, dos pisos y una falsa bajo cubierta. La puerta, adintelada y de grandes dimensiones, se sitúa en uno de los extremos de la fachada y da paso a un amplio zaguán, que comunica a la izquierda con la escalera principal y, al fondo, con el patio. . En los restantes pisos se abren hileras regulares de ventanas y balcones adintelados. El interior de este edificio, que contenía dependencias de servicio en la planta inferior y estancias de vivienda en la noble, se encuentra considerablemente modificado por las reformas de  1881.

Desde el punto de vista artístico es, sin embargo, el ala norte (que mira a la ciudad, hacia la calle de los Laureles) la que tiene un mayor interés. Construido en tapial, presentaba una articulación interna en apariencia similar a la del ala este: sótano, planta noble (con acceso desde el patio interior), segundo piso y falsa. El interior está hoy muy modificado, aunque todavía resulta reconocible su estructura original. La planta noble se dividía en tres ámbitos intercomunicados, decorados con pinturas murales, todavía parcialmente visibles en el zócalo y bajo los forjados. Las de la estancia oeste se encuentran casi perdidas. En la estancia central el zócalo presenta decoración geométrica, que imita los arrimaderos de cerámica, mientras que en la zona superior se desarrollan representaciones alegóricas (la Astronomía, la Geometría, la Música, etc., ) separadas por motivos ornamentales. Los vestigios pictóricos de la alcoba oriental corresponden a una Procesión de divinidades marinas. Jesús Criado Mainar atribuye la ejecución de estas pinturas al artista italiano Pietro Morone, que por esas fechas realizó otros encargos en Tarazona (palacio de la Zuda e iglesia de la Concepción).

El patio central, que articula todo el conjunto, es una obra renacentista de grandes dimensiones, solo comparables a las del palacio del conde de Morata en Zaragoza. Es un espacio de planta cuadrada rodeado por crujías de dos plantas, la inferior adintelada y la superior con arcadas (salvo por el lado oeste, que careció de construcciones adosadas hasta fechas muy tardías). Las vigas de la planta baja están soportadas por columnas anilladas de orden compuesto, sobre las que se sitúan zapatas de madera de tradición mudéjar. A su vez, las galerías de la planta superior se abren hacia el patio mediante arcos de medio punto de ladrillo , que apoyan alternativamente en pilares también de ladrillo (en la prolongación de los soportes del piso inferior) y columnas toscanas de piedra, que establecen un ritmo binario que hace corresponder dos arcadas de la planta superior a cada uno de los intercolumnios del piso inferior.

Por último, resulta de interés destacar la capilla del palacio. Está situada a la altura de la planta noble, en un extremo del ala sur. Su construcción puede corresponder a las obras realizadas a comienzos del siglo XVII, aunque su estado actual parece fruto de una reforma de hacia 1800, que a su vez volvió a ser muy transformada a raíz de la intervención de 2004. Es un espacio de planta cuadrada, articulado mediante pilastras toscanas (desaparecidas) y cubierto con una cúpula de media naranja sobre pechinas dotada de linterna.