Es una edificación del siglo XV (1410-1446), construida para recibir a D. Afonso, primer Duque de Bragança, hijo ilegítimo de D. João I, que contrajo matrimonio con D.ª Brites, hija del Condestable D. Nuno Álvares Pereira.
En 1739 el Gobernador de Armas de la Provincia de Trás-os-Montes, el General Francisco da Veiga Cabral, mando construir, bajo el palacio ducal, el cuartel de la Guardia Principal e la prisión militar.
En 1978, paso a albergar, además de la biblioteca-museo del duque, el Museo de la Region Flaviense. Este cuenta con una sala principal, donde está expuesta la colección permanente y una sala de exposición de pintura dedicada a Nadir Afonso.
RNAAT n.º: 249/ 2023