Es un edificio de planta rectangular adosado al ayuntamiento, cuya estrecha fachada presenta una galería superior y un alero similares a los de este, que de alguna manera suponen una prolongación del edificio contiguo.

El resto de la fachada del colegio es, sin embargo, diferente, ya que está diseñado en un momento más tardío y un estilo próximo al manierismo. La puerta se sitúa en la parte central; es un vano adintelado, con jambas y dintel decorados con motivos geométricos, enmarcado por una pareja de columnas estriadas sobre plintos. Estas sostienen un entablamento sobre el que se eleva un frontón partido con escudo central, flanqueado por pirámides rematadas por esferas.

En los pisos superiores se abren varios vanos (un balcón y ventanas) adintelados, entre los que destaca uno rematado por venera jacobea con escudo central. Una galería de tres huecos adintelados separados por columnas y un muy volado alero de madera tallada rematan la fachada.

En el interior, el patio, estrecho y rectangular, estaba compartimentado en tres sectores mediante dos hileras de tres arcos sobre pilares con una abigarrada decoración de yeserías en relieve; en la actualidad solo se conserva una de estas hileras de arcos.

Al fondo, en el lado izquierdo del patio, se abre una escalera de tipo imperial (es decir, compuesta por un primer tramo que se bifurca en dos tras un amplio rellano), a la que se abren los vestíbulos de los dos pisos altos mediante sendas arcadas de tres vanos de medio punto sobre pilastras decoradas con yeserías. El hueco de escalera está cubierto por una bóveda de lunetos, de cuya instersección en la parte central cuelga un pinjante del que pende un águila con las alas desplegadas. La caja de escaleras está iluminada por vanos en arco rebajado.

En el extremo del patio se encontraba la antigua capilla del colegio mayor, de pequeñas dimensiones, con techo decorado mediante una pintura que representa el escudo del colegio acompañado por motivos jacobeos e imperiales.

Asimismo, destaca un gran torreón cuadrado situado en la parte trasera del edificio, producto de una reforma realizada a finales del siglo XVIII. Presenta interés la estancia situada en la última planta, inmediatamente por debajo de la galería o mirador, que parece haber sido la residencia del rector del colegio. Es una gran sala rectangular, cuya decoración original ha aparecido recientemente al ser retirado un falso techo. La techumbre original está decorada con florones en sus esquinas y una gran pintura al óleo, con iconografía de carácter simbólico, en su parte central.

Originalmente, el edificio disponía de otras muchas dependencias: estancias para los colegiales, biblioteca, archivo, cocina, granero, pozo y letrinas.