La première pierre du couvent, situé au niveau du n° 74 à 80 du faubourg Bannier, est posée par les Chartreux en 1635, à l’emplacement d’une maladrerie implantée depuis le début du XIIème siècle. L’église et le grand cloître ne seront terminés qu’en 1785-1788. La Chartreuse se développe et les moines achètent des propriétés de l’autre côté du faubourg Bannier.
En 1851, les Dames du Sacré-Cœur intègrent les lieux et ouvrent un pensionnat. En 1870 les sœurs se transforment en infirmières et couturières pour l’armée. En 1875 de sérieux travaux de rénovations sont lancés et en 1881 sont ajoutés une école primaire de filles et un asile qui fonctionneront jusqu’en 1903.
En 1904 une partie de la Chartreuse est démolie lors du percement des rues Pasteur et Ladureau. De 1906 à 1909, le grand séminaire, chassé de la rue Dupanloup, s’installe dans les locaux du 75bis du faubourg Bannier. La communauté des Ursulines occupera ensuite les bâtiments jusqu’en 1944 car ne pouvant plus faire face aux frais d’entretien, elle déménage à Chécy.
L'emplacement est aujourd'hui occupé par des habitations.