Semur-en-Brionnais, capitale historique du Brionnais, est imprégné de la mémoire des célèbres seigneurs de Semur dont est issu Saint Hugues, bâtisseur de la troisième abbaye de Cluny.
Saint Hugues est né dans le château fort de l'ancienne forteresse, aujourd'hui plus ancien château de Bourgogne et le seul en Charolais-Brionnais.