Le saint patron d'Olivetta San Michele est saint Antoine de Padoue, fêté le 13 juin, dans l'église qui lui est dédiée.
C'est vers l'an Mille que se consolida le pouvoir féodal sur le territoire olivettais, lié au château et à la communauté de Penna, village médiéval qui, après le traité de paix de Paris de 1947, passa sous juridiction française, dans la commune de Breglio, avec l'autre hameau olivettais de Libri. Le territoire fut confié aux moines bénédictins de l'abbaye de Lérins, qui y répandirent la culture de l'olivier, notamment la variété taggiasca, favorisant la construction de moulins à huile et de nouvelles implantations le long des cours d'eau. En 1451, une bande d'environ 150 brigands, menée par Brondetto de Sospel et peut-être à la solde du duc de Savoie, parvint à s'emparer du château et du village de Penna ; l'année suivante, le seigneur de Dolceacqua, Enrichetto Doria, reconquit le manoir pour le compte de la République de Gênes. Le bourg conserve encore aujourd'hui les vestiges d'un château et d'implantations rurales médiévales.
