Se trata un gran edificio con fachadas recayentes a la calle Caballeros y a plaza de los condes de Buñol. Dispone de planta baja y dos pisos altos. En el primer piso encontramos balcones con los antepechos de piedra, mientras que los del segundo piso son de hierro encontrandose rematados por frontones triangulares.

La actual fachada de carácter históricista, tiene rememoranzas del renacimiento italiano. Dispone de dos puertas identicas, una de ellas da acceso al palacio propiamente dicho y la otra a un edificio residencial rotulado con el número 20.

De las partes que mejor conservan su aspecto antiguo es el patio, parcialmente cubierto y con una escalera colgada bajo la cual hay una columna rematada por un escultura que representa a un unicornio al que la falta el cuerno de la cabeza. Al patio se asoma una galeria de madera que vuela sobre él. Por esta escalera se sube al primer piso cuyas salas giran alrededor de patio interior.

Se sabe que el palacio en su origen disponía de almenas pero con el correr del tiempo y de las reformas las mismas han desparecido. También y después de la Guerra Civil Española, el edificio fue utilizado como Palacio Arzobispal hasta tanto se terminaba la actual residencia del arzobispo.

A destacar el empedrado original que tiene tanto el vestibulo de entrada como el patio, de adoquines de piedra.

Actualmente su interior acoge el Museo L'Iber de los soldaditos de plomo.