La patrona de Raffadali es santa Oliva, festejada el lunes siguiente al segundo domingo de julio. La actual iglesia madre, situada en el centro del pueblo, se edificó a partir de 1507 y se dedicó a la Virgen de los Enfermos: allí se trasladaron en 1608 la parroquia y la arciprestía de Santa Oliva, procedentes de la antigua iglesia madre a ella dedicada, hoy desaparecida. Todavía se conservan el sarcófago de Raffadali, que representa el rapto de Proserpina, y una imagen de madera del siglo XVI de María Santísima de los Enfermos con el Niño.
Surgida en época medieval como alquería árabe, Raffadali se convirtió, tras la conquista normanda, en feudo de la noble familia Montaperto; en 1507 Pietro Montaperto obtuvo del rey Fernando el «ius populandi» para la expansión del núcleo, iniciando las obras de consolidación del castillo y construcción de la iglesia madre. En el siglo XIX el pueblo fue cabecera de distrito del Reino de las Dos Sicilias, y en el siglo XX se convirtió en uno de los centros más activos del movimiento campesino siciliano.