Cet édifice est du à l'initiative de l'abbé François Leuillieux. La pose de la première pierre du couvent d'augustines eut lieu le 31 août 1857. Le couvent étant mitoyen de l'église Saint-François de Sales (IA62000002), les religieuses avaient un accès direct (aujourd'hui détruit) au choeur de l'église. Le couvent a été sans doute construit comme l'église selon les plans de l'architecte anglais Charles Hansom. Il fut endommagé par les bombardements de la seconde Guerre mondiale. La partie reconstruite vers 1954 a été exécutée selon les plans de l'architecte boulonnais Charles Dujardin.