Le saint patron de Palazzo San Gervasio est saint Antoine de Padoue, fêté le 13 juin. Le bourg devint fief sous le règne de Jeanne Ire de Naples, et son territoire fut appelé « Tenimento di Palazzo San Gervasio con il Castello » : le château marquisal, connu sous le nom de « Palatium Regium », remonte en effet à l'époque normande, mais son réaménagement fut presque certainement réalisé selon un projet de Frédéric II, qui, en plus d'être un grand chef militaire et un politique avisé, fut aussi un habile ingénieur.
Le bourg conserve la mémoire de son histoire dans la pinacothèque « Camillo D'Errico » et sur le site archéologique local ; en 1963, entre Palazzo San Gervasio et la proche Minervino Murge, fut tourné le film I basilischi, réalisé par Lina Wertmüller, qui remporta la Voile d'argent au Festival de Locarno de la même année. Parmi les douceurs traditionnelles de Pâques figurent la « scarcegghjə », à l'œuf dur, et les « laghənə chə məgghieichə », pâtes lagane à la mie de pain.