Au Moyen Âge, Romencs était situé dans une structure circulaire entourée de fossés. Un seul pont à l’Ouest en permettait l'accès. Plus tard, le village s'est développé à l'extérieur des fossés, aujourd'hui encore remplis d'eau. La tradition locale veut que l'actuelle sacristie soit l'ancienne chapelle du château, qui portait le nom de Saint Jean-de- Romencs. Le château et l'Hôtel de Ville qui étaient, avec l'église, le centre du village, n'existent plus. Seule reste l'église.
