Hovfotografen Herman Sylwander (1883-1948) förvärvade Herrhaga Gård år 1922. Stora huset som byggdes 10 år tidigare var i gott skick och Herman kunde tillsammans med sin hustru Tora Teje flytta in direkt. Tora Teje som var framgångsrik skådespelerska på Dramaten gillade stället direkt. Och snart blev det luncher och middagar med kollegor från Dramaten. Och här fanns bland annat Karl Gerhard, Gösta Ekman, Anders de Wahl och Lilly Ziedner som självklara gäster.

Georg Sylwander som var son till Herman övertog Herrhaga år 1954. Huset moderniserades och man installerade bland annat centralvärme. De gamla mörka och dystra färgerna fick ge vika för en ljusare lyster.

Huset ägs idag av Georgs son, Robert  Sylwander. Herrhaga drivs i egen regi med tonvikt på uthyrning till film och fotografering. Under sommarmånaderna hyrs Herrhaga av privatfamiljer för exklusivt semesterboende.