Etwa um 1746, nach einem grossen Brand, brach man die vordere Burgruine ab und verwendete das Material zum Bau von steinernen Häusern im Städtli. Im selben Jahr erbaute Johann Heer den Löwenhof. Ungefähr zur gleichen Zeit entstanden auch das Haus zur Grueb, der heutige Custerhof, welcher nach dem Verlegen des Landvogtsitzes vom Schlössli ins alte Amtshaus die letzte Residenz der Vögte war.