El palacio fue construido en el s. XVII, aunque su hermosa fachada rococó bicolor decorada con medallones y un bonito balcón se añadió en 1759, cuando el edificio fue adquirido por la noble familia Sermage. Tras traspasar la puerta se accede a un patio con una galería porticada; la escalera conduce al primer piso donde está instalada la Galería de los Maestros Antiguos.