In 1754 bouwde de Utrechtse burgemeester Jacob van Berck het buitenhuis Sparrendaal in de stijl van het Hollands classicisme. Het interieur kreeg vele rococoversieringen, geheel volgens de mode van die tijd. Een latere eigenares van Sparrendaal, Margaretha van Oosthuyse-de Jongh, begon na de dood van haar echtgenoot in 1818 stukken van haar landgoed af te scheiden om te verkopen. Zo ontstonden aan de Hoofdstraat in Driebergen-Rijsenburg onder andere de buitenhuizen Pietersberg, Bijdorp en Kraaijbeek. Margaretha van Oosthuyse was katholiek en werd begraven in het nieuwe katholieke kerkje in Rijsenburg. Haar nazaten zouden een sterk katholiek stempel op de omgeving drukken.