Il Castello di Grottole sorge su una collinetta distaccata dal resto del paese, in un luogo anticamente chiamato "Contrada della Motta". La struttura originaria era formata da 13 vani soprani, da 6 vani sottani, da una stalla e da una cantina. All'interno del Castello, di notevole prestigio è il grande camino sito, nella stanza precedente quella che immette alla torre, sovrastato da una grande conchiglia in stucco che custodisce al suo interno uno stemma, forse quello dei Sanseverino di Bisignano. Il castello narra un'antica leggenda. Guardando il colossale torrione, e precisamente la finestra spalancata verso il paese, nelle notti di luna e nei mesi di primavera ed a giugno, è facile vedervi stagliata la bionda figura di Abufina, la più bella e la più sfortunata ragazza mai vissuta a Grottole: ella vi parlerà del suo amore.