La porte d’En-Haut est l’une des quatre portes donnant accès à la ville close du Moyen-Âge. Comme son nom l’indique, elle se situe en partie haute de la ville, à l’Est et ouvre sur l’ancien faubourg Saint-Martin (route de Laval et de Paris). Elle se compose de deux tours reliées entre elles par un logis sur porche, le tout sommé de mâchicoulis.
Au XVe siècle, elle est protégée par une barbacane, ouvrage fortifié permettant de disposer des canons.
En 1835, le Conseil Municipal décide la démolition de l’ensemble. À gauche de la porte, la tour de la Bridole ; à droite, la tour des Prisonniers. Une promenade est aménagée après 1878 dans le fossé entre l’enceinte et la contrescarpe, renforcée en 1591 par l’éperon, bastion d’artillerie.