C’est ici que Charles Quint se retire après son abdication et passe les dernières années de sa vie. D’un côté, il y a le monastère ; de l’autre, les appartements de celui qui fut à la fois roi d’Espagne et empereur du Saint-Empire romain germanique.
Et à ce titre également souverain des Plats Pays, où il est autrefois né, à Gand. Le dernier des Téméraires séjourne à Yuste de 1556 jusqu’à sa mort, le 21 septembre 1558. Son rêve était de vivre son chant du cygne en ermite profondément croyant. Il a sincèrement essayé, certes entouré d’une petite cour.