Deze mooie burgerlijke woning werd gebouwd in 1590 en werd aan de karmelieten geschonken toen het klooster in 1623 werd gesticht. De nonnen woonden hier tot 1792. In de 19e eeuw werd de prefectuur in het voormalige klooster ondergebracht. Het huis raakte in de loop der jaren in verval en werd een opslagplaats voor ijzerwaren, voordat het in 1982 werd gekocht door de stad Chaumont, die het achterliet. In 2004 kocht Dominique WIEDERKEHR de ruïne en restaureerde deze historische residentie, die in 2006 haar prachtige vergader- en tentoonstellingszalen voor het publiek opende.
Maison des Carmélites