Conosciuto come Villa delle Albere, per il doppio filare di pioppi originariamente collocato lungo il percorso che conduceva all’edificio, Palazzo delle Albere è rappresentato nelle stampe del XVI secolo in un contesto paesaggistico di grande effetto. Fu costruito tra il terzo e il quarto decennio del Cinquecento su progetto dell’ingegnere militare Francesco Chiaramella per volere di Gaudenzio Madruzzo, padre del futuro Vescovo di Trento ai tempi del Concilio.
L’edificio è a pianta quadrata con quattro torri angolari e la sua struttura ricorda quella dei palazzi quattrocenteschi, con caratteristiche sia di villa sia di fortezza. Anticamente l’esterno doveva essere decorato da affreschi riproducenti un bugnato rustico poi sostituiti da una decorazione architettonica dipinta, oggi quasi del tutto illeggibile.
Al piano terra si trovavano, affacciati sul portico passante, i locali di servizio. I saloni di rappresentanza, tutti originariamente decorati da cicli affrescati di cui restano alcune tracce, erano situati al primo e al secondo piano. Altri frammenti di affresco si trovano sparsi nelle varie sale e nelle torri di sud-est e nord-est.

Diversi avvenimenti dalla fine del Settecento in avanti contribuirono a far decadere questa splendida dimora extraurbana, a partire dall’incendio nel 1796. Quando nel 1858 iniziò la costruzione della vicina ferrovia, l’assetto territoriale cambiò radicalmente e la villa rimase sempre più isolata dal resto della città. Dopo alcuni interventi di ristrutturazione, uno dei quali nel 1867, il palazzo fu abbandonato e ospitò famiglie di contadini che la usarono come cascinale o fienile.
Nuovi lavori di manutenzione si fecero nel corso del Novecento finché nel 1969 l’edificio fu acquistato dalla giunta provinciale che ne ordinò il restauro concluso nel 1978.

Dal 1981 a Palazzo delle Albere è attivo uno spazio dedicato all’arte moderna e contemporanea. Nel 1987 diventa la prima sede del Mart: qui il Museo ha proseguito la sua attività fino al 2010 quando ha chiuso per lavori di ristrutturazione.