Oorspronkelijk was ter plekke sprake van de Preekstoelhegge die in 1728 voor het eerst genoemd wordt.
In 1836 wordt Dhr. C.P.E. Robidé van der Aa eigenaar van de Preekstoelhegge, in dit jaar wordt het terrein onder leiding van J.D. Zocher heringericht tot een parkachtig geheel. Het nieuwe landgoed dankt zijn naam aan de zoon van van der Aa, deze heette Pieter, vandaar de naam Pietersberg.
In 1858 huurt dhr. Ch.P. van Eeghen het landgoed. In 1863 komt door koop het landgoed geheel in handen van dhr. Ch. P. Van Eeghen.
Rond 1890 wordt het landgoed aangepast door dhr. Copijn, waardoor het rond 1900 zijn tegenwoordige indeling krijgt.
Het landgoed wordt vrijwel direct na het einde van WOII (met grote schade aan de opstallen) door de familie van Eeghen verkocht aan de gemeente Renkum.
De omvang van het landgoed "De Pietersberg", is dan ruim 5 hectare groot.