Posto in posizione dominante, fu preceduto probabilmente da un’abbazia ed un castello di cui rimangono poche testimonianze. Il primo nucleo venne edificato verosimilmente prima del terribile terremoto che nel 1456 sconvolse il paese e il vicino borgo di Casalaspro, dotato anch’esso di un piccolo maniero. Dal XV sec. in poi si alternano come proprietari alcune tra le più importanti famiglie nobiliari dell’epoca come gli Ursino, i Melazzi e gli Acquaviva d’Aragona. Il complesso edilizio si articola in tre corpi distinti con varie fasi costruttive, ampliamenti e ristrutturazioni. Custodisce al suo interno splendidi dipinti ed arazzi, dislocati in maestosi saloni di rappresentanza decorati da arredamenti d’epoca che ne fanno un gioiello assoluto nel panorama delle dimore storiche dell’Italia Meridionale. Questo palazzo conserva una testimonianza storica notevole se si pensa che ad esso e’ legata la vicenda di due giornate di battaglia dei cittadini pietragallesi contro i briganti. L’evento e’ testimoniato da una lapide posta sulla facciata principale del Palazzo Ducale.