Salita al castello è l'antico accesso pedonale che dalla chiesa dei frati e dal centro storico di Santa Margherita arriva alla chiesa di San Giacomo e a villa Durazzo. Gli scalini salgono tra due antichi muri che fanno parte di villa Durazzo ma sono pericolanti e l'accesso è da tempo interrotto perché i muri sono lesionati e pericolanti. E' un'antica "Crosa" che dall'abitato sale  e permette un percorso breve di collegamento oltre che a villa Durazzo e alla chiesa di San Giacomo anche per raggiungere le colline e gli accessi al monte di Portofino.