Rego, considerada l'artista portuguesa més gran del nostre temps, va escollir ella mateixa l'arquitecte per a la "Casa de les Històries" (aquest és el nom oficial del museu). Probablement era important per a ella ombrejar els seus llenços emocionalment rics amb el fons restringit de l’arquitectura de Souto de Moura. No obstant això, en aquest projecte es va allunyar del minimalisme estricte: això es va reflectir tant en el material escollit (es tracta de formigó brut vermell) com en la composició (el paper principal el tenen dues torres piramidals "icòniques").
En aquesta solució, es poden veure les característiques del regionalisme: les "piràmides" aparellades no són ni una forma geomètrica abstracta ni, a més, una referència a l'arquitectura del món antic: l'arquitecte es va inspirar en les enormes canonades còniques de la estufes de cuina del Palau Reial de Sintra, prop de Lisboa. Al museu, aquestes formes d’alguna manera van conservar la seva funció: en una torre hi ha un cafè, a l’altra, una botiga de records.
L’edifici en si consta de quatre edificis, que convergeixen al voltant de la sala central, la sala d’exposicions temporals. Les parets dels espais expositius estan cobertes amb guix clar, el terra està pavimentat amb marbre gris extret a prop de Kayshkash. El museu també té un auditori amb 200 places.
