La patrona de Isola delle Femmine es María Santísima de las Gracias, festejada el 2 de julio, en la iglesia a ella dedicada.
El pueblo toma el nombre del islote que tiene enfrente, coronado por una torre en gran parte en ruinas que ha alimentado varias leyendas: la más conocida, aunque infundada, la señala como antigua prisión reservada solo a mujeres. Tanto la torre del islote, llamada Torre di fuori, como la del continente, llamada Torre di dentro, formaban parte del antiguo sistema de vigilancia de las torres costeras de Sicilia: esta última, de forma circular, se habría construido en el siglo XV, en tiempos del rey aragonés Martín el Joven, según el modelo de torres coetáneas como las de Capo Mongerbino y Capo Rama. El escudo municipal representa todavía hoy una torre de plata almenada a la güelfa sobre fondo azul.