Le prime notizie di una fortificazione medievale forse legata ai Capitanei risalgono al 1149. Nel 1345 il castello viene fatto ricostruire da Luchino Visconti come residenza di caccia e di villeggiatura. Qui molti artisti hanno inciso i loro dischi: Fabrizio De Andrè, Riccardo Cocciante, Lucio Dalla, i Pooh, Venditti, Mia Martini, PFM, gli Stadio, Paul Young e molti altri. Nel 1987 il castello viene acquistato dalla società alberghiera Cittadella per trasformarlo in un hotel inaugurato nel 1990.