Château de l'Hermine

Le duc Jean IV fait agrandir l'enceinte de la ville vers le port.
Le duc acquiert des terres pour faire construire son château, le château de l'Hermine, contre cette nouvelle enceinte.
Il échange le moulin et de l'étang du bas de la Garenne possession de l'abbaye de Saint-Gildas de Rhuys contre son moulin de Pencastel en Arzon.
Il fait isoler son château en l'entourant d'eau et en creusant des douves qu'il met en relation avec l'étang de la Garenne.

Froissart rapporte que le duc ayant invité Olivier V de Clisson, connétable de France, à visiter son nouveau château, il le fait prisonnier.

Le connétable de Clisson est libéré en échange de l'abandon des châteaux et des terres de Jugon, le Gavre, Cerlon et Erqui au duc et doit payer 100 000 francs d'or.

Le duc Jean V y naît.

Le duc Jean V y réside d'une façon presque permanente.

Le roi François I^er réside au château.

Le roi François I^er vient à Vannes pour discuter avec les parlementaires des Etats de Bretagne des conditions du traité d'Union entre la Bretagne et la France. Il écrit la lettre de Vannes.

Les restes du château ducal sont démolis sur ordre du roi Louis XIII.

Les Etats de Bretagne, réunis à Nantes, demandent au roi Louis XIII «que le chasteau de Vennes fut entièrement ruyné du costé de la ville, et la fosse comblé».

Louis XIV donne ce qui reste du château à la ville qui s'en sert comme carrière de pierres.

Julien Lagorce, «traiteur-pâtissier» achète le terrain.

Construction de l'hôtel actuel.

L'hôtel est acheté par M. Castelot.

L'édifice est surélevé.

L'hôtel est acheté par l'Etat qui y installe une école d'artillerie, puis l'administration du Trésor public.

La commune de Vannes achète l'hôtel. On y trouve aujourd’hui l'Ecole de Droit et des Sciences Economiques du Morbihan.

Il accueille la bibliothèque de la Société Polymathique du Morbihan, et différentes associations.
On y organise chaque année les rencontres du cinéma européen.

Les salles du rez-de-chaussée sont entièrement modernisées pour accueillir différents types d'expositions.