Il Palazzo Rondinelli risale alla fine del XVI sec. e venne costruito dalla famiglia Agnesi. Il palazzo era dotato di una torre, oggi conosciuta come Torre del Carcere e un ponte di legno collegava le due strutture e aveva un’importante funzione difensiva contro gli attacchi dei Turchi.
L'angolo estremo del Palazzo è abbellito dallo stemma di famiglia: due spade disposte a croce di S.Andrea con le punte rivolte verso il basso. Del palazzo, oggi, resta il portale monumentale dell'ingresso con lo stemma della famiglia Agnesi, dei Doria e l'aquila bicipite.