Se piensa que anteriormente al palacio existía en este solar un segundo castillo de Sos por su privilegiada situación.
Las estancias más antiguas del Palacio datan del siglo XIII, y a partir de ese momento se van sumando y añadiendo otras nuevas, hasta que a finales del siglo XVI encontramos la planta completa, adaptada y aglutinadora de los irregulares cuartos o dependencias preexistentes.
[2] La fachada corresponde al siglo XVI construida con sillares perfectamente escuadrados.
A derecha e izquierda de la portada y también en la planta superior las ventanas tienen moldurados tanto los dinteles como los alfeízares.
La fachada se remata con almenas lo que da al palacio un aire de fortaleza.