An die Kirche schlossen sich die drei weiteren Flügel der Klosteranlage an. Sie umgaben einen Kreuzgang mit Blumengarten im Inneren. Die Klosterpforte lag an der Hauptstraße gegenüber dem Haus Nr. 13. Neben dem eigentlichen Kloster befanden sich die Wirtschaftsgebäude mit Brauhaus und ein großer Garten. Das Gelände war von einer Mauer umgeben und reichte bis zur heutigen Klosterstraße.

Im Kloster lebten bis zu fünfzehn Mönche. Es entwickelte sich zum geistlichen Zentrum der Stadt. Unter den Mönchen war auch Martin von Cochem, der sich durch seine volkstümlichen religiösen Schriften hervortat. Sein bekanntestes Werk Leben Christi veröffentlichte er 1677 in Königstein.

Beim Stadtbrand 1792 wurden auch die Kirche und die Konventsgebäude schwer beschädigt. 1813 wurde das Kloster aufgehoben. Ein Teil der Gebäude blieb erhalten und von dem Wirt Gottfried Pfaff zu einem Hotel umgebaut. Das Hotel Pfaff entwickelte sich in der 2. Hälfte des 19. Jahrhunderts zu einem der besten Häuser der Stadt und beherbergte prominente Gäste.

Nach dem 1. Weltkrieg wurde es von der französischen Besatzung beschlagnahmt. Nach dem Abzug der Soldaten war der bauliche Zustand so schlecht, dass es 1928 abgerissen wurde. Seitdem befindet sich an der Stelle des ehemaligen Klosters und des späteren Hotels ein Parkplatz. Der ehemalige Klostergarten bildet heute die Konrad-Adenauer-Anlage.