Bagtanken med opførelsen af Villa Baldersbæk var, at hans familie skulle havde et samlingssted efter Holger Petersens død.