Das heutige Schloss entstand aus einer Wasserburg die zur Beaufsichtigung des Helweges errichtet wurde.
Ein prächtiges Bauwerk aus der Frühzeit der Renaissance
In den Jahren 1534 bis 1544 wurde an der Stelle der Wasserburg das jetzige Schloss errichtet. Um 1880 wurde es im Inneren und Äußeren verschönt. Das prächtige Bauwerk aus der Frühzeit der Renaissance wird durch stattliche Giebel mit Halbkreisaufsätzen, die mit Kugeln geschmückt sind, verziert.
Das Mauerwerk des Schlosseinganges stammt von der alten Wasserburg. Reste des Schlossgrabens sind noch zu erkennen.
Wenn man durch das Portal wieder aus dem Schloss kommt, sieht man links das im Stil der Weserrenaissance erbaute Kavalierhaus und rechts das Marstallgebäude die seit dem 16. Jahrhundert Teil der Schlossanlage sind. An der Ecke des Remisengebäudes befindet sich eine alte Sonnenuhr aus dem Jahre 1697.
Interessant sind die im Südflügel befindlichen Prunkkamine des flämischen Bildhauers Arend Robin. Ein Kamin mit dem Relief "Triumph der Elemente 1576", ein zweiter mit den "Vier Jahreszeiten" und der dritte "Bacchustriumph 1604".
Bis zum Jahre 1607 diente das Schloss den Schaumburger Grafen als Wohnsitz und Residenz. Später als Witwensitz bzw. Wohnsitz des Erbprinzen. Seit 1919 gehört der gesamte Schlossbezirk dem Staat und ist zur Zeit Sitz des Finanzamtes.