HOF verbindt cultuur niet alleen aan de hotelfunctie, maar ook aan het wonen. Er worden tien nieuwe hofhuizen aan de Egelantiertuin gecreëerd. Deze vormen een kleine kolonie voor acht kunstenaars en twee artists in residence. De artists in residence verblijven kortstondig – tot een jaar – in Haarlem. Kunstenaars hebben de mogelijkheid om samen te werken, te exposeren of workshops uit te voeren in de publieke ruimtes in HOF. Bewoners krijgen een voordeur aan de Egelantierstuin, kijken op de tuin en maken gebruik van de tuin.