Le saint patron de Rhêmes-Saint-Georges est saint Georges, fêté le 23 avril : les armoiries municipales représentent le saint lui-même, le rouge et le noir du chef reprenant les couleurs du duché d'Aoste, également présentes dans le drapeau régional.
Autrefois, la zone de l'actuelle commune était appelée Voix, en raison de l'écho formé par les parois de la vallée à cet endroit, par opposition à Cyvoix, qui désignait l'actuelle commune de Saint-Nicolas ; le mot grec Rhêma, dont dérive le nom de la vallée, a la même signification. Vers 1400, la commune prit le nom de son propre patron, comme ce fut aussi le cas pour Saint-Nicolas. En 1928, le gouvernement fasciste unifia les communes de Rhêmes-Notre-Dame et de Rhêmes-Saint-Georges en une seule entité, avec Rhêmes-Saint-Georges pour chef-lieu ; en 1939, le nom fut italianisé en Val di Rema, et celui du chef-lieu en San Giorgio di Rema.
L'église paroissiale San Giorgio, dans le hameau de Vieux, date du XVe siècle et fut reconstruite sur les vestiges de l'église d'origine, déjà mentionnée en 1176 : de style baroque, l'intérieur est orné de lustres en cristal de Bohême et d'un autel en bois valsésien. En 2006, le pape Benoît XVI y pria. À l'intérieur de l'église se trouve également un petit musée d'art sacré, rassemblant mobilier, statuettes et objets religieux provenant tant de l'église paroissiale que d'autres chapelles de la vallée.