En 1659, les religieux grands carmes ont reçu l'autorisation de s'installer à Ardres, pour faire oeuvre de charité et enseigner le cathéchisme. Le couvent fut construit en 1675, la chapelle en 1679.
La congrégation occupa les lieux jusqu'à la Révolution.
La chapelle a connu des fortunes diverses : édifiée en 1679 par des religieuses puis démantelée, elle devint Temple de l'Etre suprême en 1792, lieu de réunion du club des Montagnards, puis halle municipale.
Les bâtiments furent transformés en 1825, en particulier la chapelle, dont la façade fut modernisée et le volume intérieur coupé dans le sens de la la hauteur : Halle au rez-de-chaussée et salle de fêtes à l'étage.
Le mairie y fut installée de 1809 à 1962.
Les Carmes ont été récemment réhabilités, la façade retrouvant son aspect d'origine en 1993. La poste occupe le couvent depuis 1986.
La chapelle est depuis 1994 occupé par l'office du tourisme de l'Ardrésis.
