De familie De Dieu bleef er nog lange tijd wonen, tot de Napoleontische oorlogen roet in het eten gooiden. Tijdens de Engels-Russische inval in 1799 deed het huis eerst dienst als hoofdkwartier van generaal Daendels. Vervolgens, na de overname van Alkmaar door de geallieerde troepen, als hoofdkwartier van Prins Frederik, de hertog van York en de aanvoerder van de Russisch-Engelse troepen.
