Der älteste Teil des Gebäudes datiert auf etwa 1530. Um 1648 wurde es erstmals Sitz des kurmainzischen Finanzverwalters, des Amtskellers. Der Treppenhausturm trägt deshalb das erzbischöflich Mainzische Prunkwappen. Zeitweilig wurde der Gebäudekomplex allerdings wieder privat genutzt.
 
Seit 1821 befindet sich dort und in den umliegenden Gebäuden die Kreisverwaltung.