La sainte patronne d'Isola delle Femmine est Notre-Dame des Grâces, fêtée le 2 juillet, dans l'église qui lui est dédiée.
Le bourg tire son nom de l'îlot qui lui fait face, surmonté d'une tour en grande partie en ruine qui a nourri diverses légendes : la plus connue, quoique sans fondement, en fait une ancienne prison réservée aux seules femmes. La tour de l'îlot, dite Torre di fuori, et celle du continent, dite Torre di dentro, faisaient toutes deux partie de l'ancien système de guet des tours côtières de Sicile : cette dernière, de forme circulaire, aurait été construite au XVe siècle, à l'époque du roi aragonais Martin le Jeune, sur le modèle de tours contemporaines comme celles de Capo Mongerbino et Capo Rama. Les armoiries communales représentent encore aujourd'hui une tour d'argent crénelée à la guelfe sur fond azur.
