La caserne s’est installée dans les locaux de l'ancien couvent des Ursulines de Saint-Charles en 1814, au sud de la Loire, place Saint-Charles, à l’angle de la rue de la Brèche et de la place Saint-Charles.
Occupée par les gendarmes durant la deuxième guerre mondiale puis par une compagnie de CRS, elle est démolie en 1977 et remplacée en 1980 par la Caisse d’Allocations Familiales.
Les seuls vestiges encore présents place Saint-Charles, sont les chasse-roues à l’entrée du parking du personnel et les soubassements des murs d’enceinte, sur lesquels sont gravées les hauteurs des différentes crues de la Loire.