En 1865, sur un terrain donné par la ville, la mère supérieure de l’hospice de Ligny-en-Barrois, Sœur Théodore Royer finance la construction de l’asile Saint-Charles qui aura pour vocation l’accueil des jeunes enfants. En témoigne la gravure sur la façade, au-dessus de la porte : « Laissez venir à moi les petits enfants ».
Sur cette même façade, se retrouvent à chaque extrémités les armes de Saint-Charles fondateur de la congrégation hospitalière de lorraine : les sœurs Saint-Charles, à laquelle appartenait Sœur Théodore Royer.
En 1882, le bâtiment est cédé à la ville de Ligny-en-Barrois qui l’utilise comme école maternelle jusque dans les années 90.
À ce jour y ont pris place : le Bureau d’Information Touristique, la Médiathèque Jeanne Ancelet-Hustache et la salle Camille Joignon.