Haus Seesters, Bauherr: privat