Le château et les fragments de la première enceinte urbaine dominent le site dont l'escarpement fut retenu pour ses possibilités de défense. Au sommet, le château ne conserve que les vestiges du XIIIe au XVe siècle qui ont échappé à son démantèlement en 1620. L'enceinte de la partie la plus ancienne de la ville encadre le château et délimite une zone déjà largement abandonnée par la population au XIVe siècle au profit de la ville basse. C'est de cette époque que date la reconstruction générale de l'ouvrage dont les fragments sont encore visibles, tant pour la ville haute que pour la ville basse.