Der Palast gehörte der Familia Monterrey, dessen Bau im Auftrag gab. Es handelt sich um das größte Exemplar des Plateresks Spaniens.
Der Palast hat einen quadratischen Grundriss, der durch zwei senkrechte Flügel erweitert ist. Er besteht aus drei Stock und vier Türme, die mit Aussichtspunkten und einer plateresken Brüstung versehen sind. Die Galerie des letzten Teilbaukörpers besitzt mit Medaillons verzierten Arkaden.

Der adelige Bereich wurde mit scheitrechten Fenstern und Pilastern gebaut.
Der Palast beherbergt eine heraldische Sammlung mit Gegenständen der historischen Familien Zúñiga, Acevedo, Ulloa und Fonseca u. a.

Trotz der Monumentalität des Gebäudes wurde lediglich ein Viertel des originellen Entwurfes erledigt. Nicht zu übersehen ist der Kontrakt zwischen den Verteidigungstürmen und der Brüstung der obersten Galerie, die mit außergewöhnlichen menschlichen Figuren versehen ist. Heutzutage gehört der Palast der herzoglichen Familie de Alba.