La sua costruzione è da attribuirsi al Vescovo Leone (sotto il Pontificato del Papa Gregorio IV) nel 839, vari personaggi illustri dimorarono in questo edificio, uno di questi fu S.Tommaso d'Aquino (1272). Nel 1452, per volere di Alfonso d'Aragona, vennero eseguiti notevoli lavori di restauro.Nel sedicesimo secolo il maniero fu di proprietà di una delle più belle donne d'Italia, Giulia Gonzaga, contessa di Traetto e di Fondi e, successivamente fù di proprietà di Isabella Colonna. Nel 1692 lo acquistò Adriano Carafa. La struttura, molto semplice, è formata da una pianta quadrilatera che crea all'interno una corte con arcate ogivali gotiche. Il Castello aveva al suo interno una torre alta 60 metri, semidistrutta da un fulmine nell’Ottocento. Nel 1990 Il Comune di Minturno ha acquistato parte del Castello dal Principe Francesco Caracciolo-Carafa, per 15 milioni di lire.
Ogni anno a Luglio in occasione della sagra delle Regne il castello viene illuminato da fuochi d'artificio.