Das Schloss wurde in der ersten Hälfte des 16. Jahrhunderts von unbekannten Bauherren erbaut.
Heute befindet sich neben dem Büchsenmacher- und Jagdmuseum und der Sonderausstellung „Mythos Jagd – Sammlung Horten“, die Stadtbücherei, der Trauungssaal, ein Café, das Büro der Kommunal GmbH sowie ein Kosmetikstudio im Schloss.