Auf einer ehemaligen Wasserburg entstand in Fischbach bereits im 16. Jh. ein Schloss in der jetzigen Grundform. Nach mehrfachem Besitzerwechsel kam es 1822 als Sommerresidenz in den Besitz des Prinzen Wilhelm, Bruder von König Friedrich Wilhelm III. Dieser verschönerte gemeinsam mit seiner Gemahlin, Prinzessin Marianne die Umgebung. Unter ihrer Anleitung schuf der Buchwalder Gärtner Walter eine weiträumige Parkanlage, die die malerischen Falkenberge mit einbezog.
Die Residenz blieb im Besitz der Nachkommen der preußischen Prinzenfamilie bis zum zweiten Weltkrieg. Heute befindet es sich in privaten Händen.