La chapelle de l’hôpital, dédiée à Saint-Charles-Borromée et construite selon les plans de Jacques V. Gabriel, a été commencée en 1713, comme l’atteste une plaque commémorative datant de 1864, et a été bénite en 1717 par Louis-Gaston Fleuriau d’Armenonville, évêque d’Orléans. L’église a la forme d’une croix non orientée dont le bras droit était réservé aux hommes et le gauche aux femmes, comme le précisait le règlement de l’hôpital. Elle fut ensuite agrandit et son aspect actuel, en particulier la façade, date de 1864, date de sa bénédiction par Mgr Dupanloup. Elle est classée Monument Historique depuis 1931.